跳到正文
公众号 机器之心·· 9 天前精选

MIT CSAIL 团队让 GPT-6 Astra 直接修改 Qwen3.5-0.8B 权重,MATH-500 成绩从 7.9% 升至 48.1%

AI 导读

MIT CSAIL 团队让 GPT-6 Astra 通过自然语言直接读取并修改 Qwen3.5-0.8B 的权重,只改动约 0.016% 的参数就把 MATH-500 成绩从 7.9% 提升到 48.1%。Astra 在有限次前向计算中定位到第 15 层和第 19 层 MLP 写入的一个循环方向,从这两层各 64 个输出列中减去该方向,共修改 131,072 个权重,没有重新训练或使用梯度下降。在 Qwen3.5-0.8B 上,GSM8K 从 13.8% … AI Safety HOT (aisafetyhot.com), CC BY-NC 4.0 · 本地公开归档导入

推荐理由

用户指定的本地展示归档;未运行评分模型,未生成分数。

来源:公众号 机器之心 · mp.weixin.qq.com