[控场AI]
概念refusal direction

拒绝方向

机制可解释性研究中的概念,指对齐后语言模型中拒绝与顺从请求的激活差异所投射的低维方向,沿该方向移动激活可改变模型拒绝倾向。

时间轴 (近 90 天)

11月5日

拒绝方向是机制可解释性研究中的概念:在对齐后的语言模型中,拒绝有害请求与顺从请求的激活差异可以投射到一个低维方向上,沿该方向移动激活可显著改变模型的拒绝倾向。

待验证50%

全部知识事实 (1)

来源文章