公众号 · 新智元·· 4 小时前精选AI 评分83
MIT 提出权重空间编程:GPT-6 Astra 改写 0.016% 权重,Qwen3.5-0.8B 数学成绩涨 6 倍
GPT-6爆改模型权重!数学能力狂飙6倍,MIT博一新作破圈了
AI 导读
MIT CSAIL 团队提出「权重空间编程」,让 GPT-6 Astra 在不训练、不算梯度的情况下直接读写小模型权重。它只改动 Qwen3.5-0.8B 的 131,072 个参数(占 0.016%),把 MATH-500 准确率从 7.9% 提到 48.1%,GSM8K 从 13.8% 升到 67.1%,IFEval 指令遵循从 21.0% 升到 62.3%。
选题角度
MIT 团队让 GPT-6 Astra 只改 0.016% 权重就把 Qwen3.5-0.8B 数学成绩从 7.9% 拉到 48.1%,适合围绕死循环病灶定位和对照实验讲清这套改权重玩法。
来源:公众号 · 新智元 · mp.weixin.qq.com