HaiAI123

全球AI工具精选导航

新行业动态
新上榜

同源模型代码审查偏差,建议别让 Claude 审查 Claude 代码

2026/11/05 — 11/05 21:20·1 个来源(全部)·1 篇报道(全部)

核心速览 (Key Takeaways)

  • 一篇 DEV Community 文章引用 ICML 2025 论文称,同家族模型在评判答案时会偏好自身犯过的错误方式;
  • Qwen2.5-72B 给自家 7B 模型打 71% 正确率,而 Llama-3.1-70B 仅 67%。
  • 作者据此建议不要用同一厂商的模型审查自己写的代码,应换用其他厂商的审查智能体,并保留人工阅读 diff。

事件背景与详细解读

2026 年 11 月 5 日,DEV Community 上出现了一篇讨论 AI 代码审查实践的文章,标题为「别让 Claude 审查 Claude 的代码,同源模型易犯相同错误」。作者在文中援引 ICML 2025 一篇由 Goel 等人完成的论文,分析了同源模型在相互打分时可能出现的偏差,指出同家族模型在评判答案时,会偏好与自己相同的错误方式。

文章给出的数据来自论文中的一组评分实验:Qwen2.5-72B 为两个较小模型的自由形式答案评分时,给自家的 7B 模型打出了 71% 的正确率,而给 Llama-3.1-70B 只打出 67%。换成同一批题目的选择题版本后结果出现反转:Qwen 7B 答对了 41%,Llama 则答对了 51%。作者援引的这组数据出自 Goel 等人题为《Great Models Think Alike》的研究。

基于这一结论,作者提出两条建议:一是不要让同一厂商的模型审查自己写的代码,在代码审查环节应改用其他厂商的审查智能体;二是即便引入自动化审查,仍然要保留人工阅读 diff 的环节。截至目前,这一观点仍停留在个人作者的提议层面,材料中未见有厂商或机构对此作出回应,也没有后续实证跟进的报道。

值得说明的是,文章标题中的 Claude 是作者对问题的举例,正文部分并没有给出 Claude 实际参与评分或代码审查的数据,材料中可核对的评分实验只涉及 Qwen2.5-72B、Qwen 7B 和 Llama-3.1-70B 三个模型。

AI 综合 1 篇报道生成 · 更新于 3 小时前

相关 AI 工具

24 小时热度热度指数 89 · 峰值 97 · 3 小时前
24 小时前现在

这件事的报道 点标题看原文

昨天
  1. 一篇 DEV Community 文章引用 ICML 2025 论文指出,同家族模型在评判答案时会偏好自己犯过的错误方式,Qwen2.5-72B 在评分时给自家 7B 模型打了 71% 正确率,而 Llama-3.1-70B 只有 67%。作者据此建议,不要让同一厂商的模型审查自己写的代码,应换用其他厂商的审查智能体,并保留人工阅读 diff。

    给用 AI 做代码审查的开发者一个避开同源盲区的具体做法。

    DEV Community · AIAI 评分 54

同时在说的其他事

热度怎么算的?了解口径

热度按 48 小时内有多少个独立来源在说这件事算:同一个来源发多条只算一次,并按 24 小时半衰期衰减,所以排前面的是很多人在说的事。

本页汇总公开订阅源,标题与摘要由模型整理,版权归原作者所有;重要信息请回原文核对。如权利人认为相关标题或摘要侵权,请通过页尾联系邮箱提供具体页面与权利依据,我们核实后会及时删除或替换。

爆
讨论快速增加
新
首报 6 小时内
发酵中
讨论仍在增加

回 AI 行业动态榜 →