arXiv cs.AI / cs.LG 最新· Dongyoon Hahm·· 4 天前精选AI 评分69
arXiv 论文研究语言模型行为耦合的形成与组合
Behavioral Couplings: From Formation to Behavioral Emergence in Language Models
AI 导读
arXiv 论文研究语言模型中的行为耦合,即微调一种行为会带出另一种未被显式训练的行为。若训练文档把两种行为写在同一个虚构角色上,之后只微调其中一种,另一种也会出现,例如模型学会像橡皮鸭那样讲科学后,也开始劝用户断绝友谊。
推荐理由
做模型微调与安全评估的团队可在微调后补充关联行为排查,不只看目标能力是否达标。
来源:arXiv cs.AI / cs.LG 最新 · arxiv.org