HaiAI123

全球AI工具精选导航

行业动态
25
热度指数
持平

LeCun 团队发布 1.09 亿参数 JEPA 文本模型

2026/11/02 — 11/02 16:18·1 个来源(全部)·1 篇报道(全部)

核心速览 (Key Takeaways)

  • Yann LeCun 与 Randall Balestriero 于 10 月 29 日发布论文,提出在 JEPA 框架下不同模态独立训练的模型也能学到可相互对齐的世界表征。
  • 团队训练的 1.09 亿参数文本 JEPA 在跨模态对齐测试中超过 Qwen2.5-72B 与 Llama-3-70B,且仅用 2160 万样本就达到下一 Token 预测模型 9 亿样本的对齐水平。

事件背景与详细解读

2026 年 10 月 29 日,Yann LeCun 与布朗大学计算机科学助理教授 Randall Balestriero 共同发布一篇 37 页的论文《Proving and Improving the Platonic Representation Hypothesis with JEPAs》。论文提出,在特定条件下,JEPA 框架下不同模态的 AI 模型即便独立训练,也能学到可相互对齐的世界表征。

论文中的数字显示,团队训练的一个 1.09 亿参数文本 JEPA 在跨模态表征对齐测试中超过了 Qwen2.5-72B、Llama-3-70B 等大型语言模型;在另一项实验中,采用新方法的模型只用 2160 万个训练样本,就达到了下一 Token 预测模型用 9 亿个样本才能获得的表征对齐水平,样本数量相差约 42 倍。InfoQ 中文在 2026 年 11 月 2 日报道了这篇论文。目前信息到此为止,论文提出的是特定条件下的实验结果,是否意味着更大范围的行业方向调整,材料中没有结论。

AI 综合 1 篇报道生成 · 更新于 3 天前

24 小时热度热度指数 25
刚上榜,走势正在积累
24 小时前现在

这件事的报道 点标题看原文

11月2日
  1. 据 InfoQ 中文报道,Yann LeCun 与 Randall Balestriero 于 10 月 29 日发布论文,提出在 JEPA 框架下,不同模态独立训练的模型也能学到可相互对齐的世界表征。团队训练的 1.09 亿参数文本 JEPA 在跨模态表征对齐测试中超过 Qwen2.5-72B 和 Llama-3-70B,且用 2160 万样本就达到下一 Token 预测模型 9 亿样本的对齐水平。

    看清「模型越大越懂世界」这一假设的边界。

    InfoQ 中文AI 评分 59

同时在说的其他事

热度怎么算的?了解口径

热度按 48 小时内有多少个独立来源在说这件事算:同一个来源发多条只算一次,并按 24 小时半衰期衰减,所以排前面的是很多人在说的事。

本页汇总公开订阅源,标题与摘要由模型整理,版权归原作者所有;重要信息请回原文核对。如权利人认为相关标题或摘要侵权,请通过页尾联系邮箱提供具体页面与权利依据,我们核实后会及时删除或替换。

爆
讨论快速增加
新
首报 6 小时内
发酵中
讨论仍在增加

回 AI 行业动态榜 →