綠測不代表沒問題：手工變異測試戳穿 AI 補丁

2026 年 11 月 12 日，一位開發者在 DEV Community 上發文，介紹了自己針對 AI Agent 所寫補丁的驗證實驗。當前社群中正有一個名為“Verifying AI Agent Patches Beyond CI Green Gates”的熱門話題，討論焦點已經轉向：當 AI Agent 寫完補丁、持續整合變綠之後，這樣的結果究竟能說明什麼。這位開發者指出，綠燈通過只代表測試被通過，並不能說明測試本身是否有效。

由於無法拿別人的 AI Agent 補丁去實驗室做驗證，他選擇在自己編寫的程式碼上做了一個更簡單、更直接的實驗，並在價格函式上進行。他故意在測試全部通過的價格函式中製造了 10 種錯誤，測試結果只抓住了其中的 5 種。他借這場手工變異測試說明，CI 變綠只能證明測試順利通過，無法證明測試本身有效，AI Agent 寫出的補丁同樣需要接受更嚴格的驗證。

目前，這項實驗僅停留在開發者個人程式碼上的手工測試階段，尚無後續進展。