跳到正文
arXiv · cs.AI · Rachael Harkness, Konrad Rawlik · 3 小时前模型评分35

研究:大语言模型(LLM,Large Language Model) 激活引导编辑何时应依赖输入

When Should an LLM Steering Edit Depend on the Input?

导读

一项 arXiv 研究提出,激活引导编辑是否应依赖输入,取决于目标状态在查询所请求的类别内部是否有变化,且这一点在拟合任何规则前即可测量。研究把对比激活加法(CAA,Contrastive Activation Addition)从固定方向扩展到按查询检索目标状态,在六个替换语料和两个模型上,检索在每个语料每一层都优于固定方向引导。

分类置信度

中 · 待人工复核

  • 只有单一媒体来源,需要人工复核。

来源级别:媒体与个人

事件类型:研究发布

证据摘录

  • “We study the impact of increasing input-dependence in the steering edit, moving from a difference of means to a destination retrieved per query”

来源:arXiv · cs.AI · arxiv.org