HaiAI123

全球AI工具精选导航

行业动态
持平

Replit 发布 ViBench 2.0 长周期构建基准并公布评测结果

2026/10/29 — 10/29 06:19·1 个来源(全部)·4 篇报道(全部)

核心速览 (Key Takeaways)

  • Replit 发布面向长周期软件构建的 ViBench 2.0:智能体从空项目起步,按功能逐个搭建完整产品,且无法提前看到后续步骤。
  • 评测中 GPT-6.1 Sol 以 65% 通过率领先,单次构建约 12 美元,另一组公开产品测试里其 pass@1 升至 53%。
  • Replit 还指出约四分之三的失败构建能通过每项单功能检查,问题出在功能交汇处。

事件背景与详细解读

2026 年 10 月 29 日,Replit 在 X 上发布 ViBench 2.0,这是一个面向长周期软件构建的基准。智能体从空项目开始,按功能逐个构建完整产品,且无法提前看到后续步骤,用于检验模型维持长程任务的能力。

Replit 随即公布了 ViBench 2.0 的构建评测结果:三个模型的构建通过率超过 40%,其他模型均不足 20%。其中 GPT-6.1 Sol 以 65% 的通过率领先 GPT-6 Astra 的 60%,单次构建成本分别约为 12 美元和 90 美元;Opus 5.5 通过率为 49%,构建耗时约 70 分钟,比 Sol 快约 2.5 倍,主要受 API 供应商速度影响。Replit 还给出新模型分数更高的一组数字:在 8 个公开产品上,pass@1 从 GPT-5.4 的 0% 升至 GPT-6 Sol 的 31% 和 GPT-6.1 Sol 的 53%;GPT-6.1 Terra 以约 Sol 一半的成本通过 47%。

关于失败模式,Replit 称每个功能单独运行都正常,合在一起却会出问题。约 3/4 顶级模型的失败构建能通过每一项单功能检查,失败发生在功能交汇处。例如代码托管中草稿 PR 不显示合并冲突,文档编辑器无法对单词进行评论。目前事件停留在 Replit 公布基准、评测结果与失败分析的阶段,尚无第三方复现或独立验证的报道。

AI 综合 4 篇报道生成 · 更新于 13 小时前

最新进展Replit 在 X 上称,每个功能单独运行都正常,合在一起却会出问题;约 3/4 顶级模型的失败构建能通过每一项单功能检查,失败发生在功能交汇处。例如代码托管中草稿 PR 不显示合并冲突,文档编辑器无法对单词进行评论。

相关 AI 工具

24 小时热度热度指数 68 · 峰值 98 · 13 小时前
24 小时前现在

这件事的报道 点标题看原文

今天
  1. Replit 在 X 上称,每个功能单独运行都正常,合在一起却会出问题;约 3/4 顶级模型的失败构建能通过每一项单功能检查,失败发生在功能交汇处。例如代码托管中草稿 PR 不显示合并冲突,文档编辑器无法对单词进行评论。

    揭示 AI 编码模型在功能集成处的真实短板。

    X:Replit (@Replit)AI 评分 60
  2. Replit 在 X 上称,新模型分数更高:在 8 个公开产品上,pass@1 从 GPT-5.4 的 0% 升至 GPT-6 Sol 的 31% 和 GPT-6.1 Sol 的 53%。GPT-6.1 Terra 以约 Sol 一半的成本通过 47%。

    一组数据看新一代 GPT 模型在真实构建任务上的进步与成本。

    X:Replit (@Replit)AI 评分 59
  3. Replit 公布 ViBench 2.0 构建评测结果,GPT-6.1 Sol 以 65% 通过率领先 GPT-6 Astra 的 60%,单次构建成本约 12 美元,后者约 90 美元。Opus 5.5 通过率 49%,构建耗时约 70 分钟,主要受 API 供应商速度影响。

    用数据看主流模型长周期建站能力差距。

    X:Replit (@Replit)AI 评分 60
  4. Replit 发布 ViBench 2.0,这是一个面向长周期软件构建的基准。智能体从空项目开始,按功能逐个构建完整产品,且无法提前看到后续步骤,用于检验模型维持长程任务的能力。

    关注智能体长周期构建能力的统一评测。

    X:Replit (@Replit)AI 评分 67

同时在说的其他事

热度怎么算的?了解口径

热度按 48 小时内有多少个独立来源在说这件事算:同一个来源发多条只算一次,并按 24 小时半衰期衰减,所以排前面的是很多人在说的事。

本页汇总公开订阅源,标题与摘要由模型整理,版权归原作者所有;重要信息请回原文核对。如权利人认为相关标题或摘要侵权,请通过页尾联系邮箱提供具体页面与权利依据,我们核实后会及时删除或替换。

爆
讨论快速增加
新
首报 6 小时内
发酵中
讨论仍在增加

回 AI 行业动态榜 →