跳到正文
LessWrong·· 9 天前精选

Teaching Qwen Why:复现并扩展 Anthropic 的对齐训练方法

AI 导读

Second Look Research 在 Qwen 2.5 32B 和 72B 基础模型上部分复现并扩展了 Anthropic 的 Teaching Claude Why 对齐训练方法,虚构故事和伦理困境建议两类训练数据都能降低智能体错位。在 Anthropic 的 Agentic Misalignment 评测(27 个条件,Claude Sonnet 4.6 判定)上,32B 基线错位率 61%,14M token 虚构故事训练降至 43%,300… AI Safety HOT (aisafetyhot.com), CC BY-NC 4.0 · 本地公开归档导入

推荐理由

用户指定的本地展示归档;未运行评分模型,未生成分数。

来源:LessWrong · lesswrong.com