绿测不代表没问题：手工变异测试戳穿 AI 补丁

2026 年 11 月 12 日，一位开发者在 DEV Community 上发文，介绍了自己针对 AI Agent 所写补丁的验证实验。当前社区中正有一个名为“Verifying AI Agent Patches Beyond CI Green Gates”的热门话题，讨论焦点已经转向：当 AI Agent 写完补丁、持续集成变绿之后，这样的结果究竟能说明什么。这位开发者指出，绿灯通过只代表测试被通过，并不能说明测试本身是否有效。

由于无法拿别人的 AI Agent 补丁去实验室做验证，他选择在自己编写的代码上做了一个更简单、更直接的实验，并在价格函数上进行。他故意在测试全部通过的价格函数中制造了 10 种错误，测试结果只抓住了其中的 5 种。他借这场手工变异测试说明，CI 变绿只能证明测试顺利通过，无法证明测试本身有效，AI Agent 写出的补丁同样需要接受更严格的验证。

目前，这项实验仅停留在开发者个人代码上的手工测试阶段，尚无后续进展。