FrameFlip48 基準：用機器人程式測模型座標系跟蹤

2026 年 10 月 3 日，DEV Community 上出現一篇介紹 FrameFlip48 的文章。該基準是 Kaggle Benchmarking Challenge 的參賽作品，用來檢驗模型在短小的機器人運動程式中能否正確跟蹤座標系（translation frame）。

它由 24 組配對用例組成，每組兩條提示中的數字與指令完全相同，唯一區別是 ACTIVE_FRAME 的取值在 LOCAL 與 WORLD 之間切換，一條寫 ACTIVE_FRAME = LOCAL，對應的另一條寫 ACTIVE_FRAME = WORLD。每組對照都在不同的會話中執行，因此模型不會拿到配對另一側的答案。

文章標題稱，有四個模型在這項測試中表現出兩種失敗模式；原文片段只交代了基準的設計與執行方式，沒有列出這四個模型的具體名稱，也沒有說明兩類失敗模式各自是什麼。截至這篇報道，事件停留在基準設計與結果概述這一步，除此之外沒有更多進展資訊。