HaiAI123

全球AI工具精选导航

爆行业动态
↑ 249%

MIT 提出权重空间编程,用 GPT-6 Astra 改写 Qwen3.5-0.8B 权重

2026/11/03 — 11/03 10:18·3 个来源(全部)·3 篇报道(全部)·入选 11-03 日报

核心速览 (Key Takeaways)

  • MIT CSAIL 研究者提出「权重空间编程」,让 GPT-6 Astra 直接读取并修改 Qwen3.5-0.8B 的权重,仅调整约 0.016% 的参数,就把该模型在 MATH-500 上的成绩从 7.9% 提到 48.1%,全程未用梯度下降或传统训练循环。
  • 研究者称关键不是随机改参数,而是先定位模型在数学推理上的循环问题。
  • 量子位报道称数学能力提升 6 倍、指令执行能力同步提升,但未提供论文细节或实验设置。

事件背景与详细解读

2026 年 11 月 2 日,MIT CSAIL 研究者 Rikiya Takehi 在个人博客发布一项名为「权重空间编程」(Weight-Space Programming)的研究,核心思路是让大语言模型直接读取、理解和修改另一个神经网络的权重,而不是通过常规训练流程调整参数。同日,相关讨论出现在 Hacker News,摘要称 Astra 能直接读写模型权重、在权重空间里改进 Qwen,而不只靠微调或提示词,原帖获 630 点、182 条评论,讨论集中在方法能否复现、对权重的改动是否稳定。

11 月 3 日,量子位报道称 MIT 一项研究显示 GPT-6 Astra 能够直接修改 Qwen 的模型权重,数学能力提升 6 倍,指令执行能力也同步提升,但材料未提供论文细节或实验设置;同日 IT 之家补充了更具体的实验数据:由 Rikiya Takehi、Jayden Teoh、Alex Zhang 和 Omar Khattab 共同完成的这项研究,让 OpenAI 的 GPT-6 Astra 直接分析并修改阿里云通义千问热门模型 Qwen3.5-0.8B 的神经网络权重,仅调整约 0.016% 的参数,就将该模型在 MATH-500 数学基准测试中的成绩从 7.9% 提升至 48.1%,达到原来的约 6.1 倍,且整个过程没有使用梯度下降或传统训练循环。此外,GPT-6 Astra 并不是简单随机调整少量参数,而是先定位 Qwen3.5-0.8B 在数学推理上的循环问题,该模型容易在回答数学问题时反复生成同类步骤。

关于所涉模型,三篇报道的说法并不完全一致:Hacker News 摘要只提到改进 Qwen,量子位表述为修改 Qwen 的模型权重,IT 之家则具体到 Qwen3.5-0.8B。目前公开信息停留在 11 月 3 日的博客发布与媒体报道阶段,材料未提供论文细节或实验设置。

AI 综合 3 篇报道生成 · 更新于 1 小时前

最新进展MIT CSAIL 研究者提出「权重空间编程」,让 OpenAI 的 GPT-6 Astra 直接读取并修改 Qwen3.5-0.8B 的权重,仅调整约 0.016% 的参数,就把该模型在 MATH-500 上的成绩从 7.9% 提到 48.1%,全程未用梯度下降或传统训练循环。研究者称关键不是随机改参数,而是先定位模型在数学推理上的循环问题。

相关 AI 工具

24 小时热度热度指数 269 · 峰值 272 · 当前
24 小时前现在

这件事的报道 点标题看原文

今天
  1. MIT CSAIL 研究者提出「权重空间编程」,让 OpenAI 的 GPT-6 Astra 直接读取并修改 Qwen3.5-0.8B 的权重,仅调整约 0.016% 的参数,就把该模型在 MATH-500 上的成绩从 7.9% 提到 48.1%,全程未用梯度下降或传统训练循环。研究者称关键不是随机改参数,而是先定位模型在数学推理上的循环问题。

    一种不靠训练、由模型直接改权重的调优思路

    IT之家AI 评分 68
  2. 据量子位报道,MIT 的一项研究显示,GPT-6 Astra 能够直接修改 Qwen 的模型权重,数学能力提升 6 倍,指令执行能力也同步提升。材料未提供论文细节或实验设置。

    关注模型权重跨模型修改的新能力

    量子位AI 评分 62
  3. 一篇技术博客介绍的方法 Astra 声称能直接读取和写入模型权重,在权重空间里改进 Qwen,而不是只靠微调或提示词。该帖在 Hacker News 获 630 点、182 条评论,讨论集中在方法能否复现、对权重的改动是否稳定。

    了解权重级改造这条路是否真能替代微调

    Hacker News · 热榜AI 评分 60

同时在说的其他事

热度怎么算的?了解口径

热度按 48 小时内有多少个独立来源在说这件事算:同一个来源发多条只算一次,并按 24 小时半衰期衰减,所以排前面的是很多人在说的事。

本页汇总公开订阅源,标题与摘要由模型整理,版权归原作者所有;重要信息请回原文核对。如权利人认为相关标题或摘要侵权,请通过页尾联系邮箱提供具体页面与权利依据,我们核实后会及时删除或替换。

爆
讨论快速增加
新
首报 6 小时内
发酵中
讨论仍在增加

回 AI 行业动态榜 →