跳到正文
arXiv · cs.AI · Kwangsuk Park, JiWoong Yang, Vaniushkina Kseniia · 10 小时前模型评分53

研究:模型把事实改写成故事时,来源一致性指标漏掉了哪些失真

What Breaks When Facts Become Stories? The Distortions Source-Agreement Metrics Miss When Models Retell Real Events

导读

一项研究让三个模型家族把 2000 篇新闻改写成摘要和故事,逐项比对五个 W(即事件的人物、时间、地点、原因、方式)上的变化,并判断每处失真是否由指定视角合理带来,结果有三分之一被排除。

生成六维分析
分类置信度

中 · 待人工复核

  • 只有单一媒体来源,需要人工复核。

来源级别:媒体与个人

事件类型:研究发布

证据摘录

  • “To support work on detecting and reducing them, we release ReTold-2k, a reconstructable corpus with the scoring protocol and per-judge baselines kept unaggregated.”

来源:arXiv · cs.AI · arxiv.org