跳到正文
arXiv · cs.AI · Alexander Loth, Martin Kappes, Marc-Oliver Pahl · 10 小时前模型评分42

研究:人类无法可靠分辨 大语言模型(LLM,Large Language Model) 生成的新闻

Can Humans Tell? A Dual-Axis Study of Human Perception of LLM-Generated News

导读

一项基于 JudgeGPT 平台的研究收集了 1054 名参与者对六个大语言模型(LLM,Large Language Model)生成内容的 2318 次判断,发现人类无法可靠区分机器生成与人类撰写的新闻,该结论在所有测试模型上均成立,包括参数量仅 7B 的开源模型。

生成六维分析
分类置信度

中 · 待人工复核

  • 只有单一媒体来源,需要人工复核。

来源级别:媒体与个人

事件类型:研究发布

证据摘录

  • “We investigate this question using JudgeGPT, a study platform that independently measures source attribution (human vs. machine) and authenticity judgment (legitimate vs. fake) on continuous scales.”

来源:arXiv · cs.AI · arxiv.org