arXiv · cs.AI · HongJin Song, Weiqiao Shan, Runwu Shi, Yifei Wu, Yujin Wang, Jiale Luo, Jiasheng Kuang, Xinyu Yang, Zhaoqi Cui, Chuizheng Kong, Ziyu Wu, Guowu Tan, Qiuyu Fang, Chunxiang Jin · 4 小时前模型评分37
研究揭示语音大模型记忆中的历史干扰问题
The Right Source Is Not Enough: Understanding History Interference in Speech-LLM Memory
导读
针对 MOSS-Audio 和 MiMo-Audio 的对照实验发现,无关历史音频会把回答引向特定的竞争答案,且这一影响超出上下文长度的普遍效应。因果干预显示,开放式问答中多数错误在阻断对无关来源的直接访问后消失,但选择题中早期历史影响仍通过问题-候选状态传递。强化被查询角色与抵消历史值联合干预时,回答恢复效果最好。
分类置信度
中 · 待人工复核
- 只有单一媒体来源,需要人工复核。
来源级别:媒体与个人
事件类型:研究发布
证据摘录
- “We investigate why irrelevant historical audio changes answers even when the queried event remains represented.”
来源:arXiv · cs.AI · arxiv.org