跳到正文
热点事件持续更新

研究发现激活引导改变LLM话语特征,第二向量可修复

1 篇报道1 个报道来源10 小时前更新

先了解这件事

AI 综述

Shivam Adarsh等作者发现,激活引导会系统改变大语言模型生成文本的话语维度,包括正式程度、证据使用和模糊性;他们提出加入针对受影响话语维度的第二个互补向量,称该干预可恢复约78%的非预期话语变化,并在约93%的生成中保留预期的引导行为。 激活引导是在推理阶段向大语言模型残差流激活加入向量、不重训权重也不改提示词的行为控制技术。

AI 根据报道生成 · 3 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月2日
  1. arXiv · cs.AI
    研究:激活引导会改变大语言模型话语层面,可用第二向量干预修复

    研究发现,激活引导(activation steering,一种在推理阶段向大语言模型残差流激活加入向量、不重训权重也不改提示词的行为控制技术)会系统性地改变生成文本的话语维度,如正式程度、证据使用和模糊性。团队提出加入第二个互补向量来针对受影响的话语维度,该干预恢复了约 78% 的非预期话语变化,同时在约 93% 的生成中保留了预期的引导行为。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。