arXiv · cs.AI · Prabhjot Singh, Pritam Deka, Vijay Chennareddy · 6 小时前模型评分56
研究：患者用自己口吻描述病情时，临床语言模型准确率下降 9.6 分
Same Illness, Different Voice: Clinical Language Models Lose Accuracy When Patients Speak for Themselves
导读
研究把 1,000 个 MedQA 病例配上临床、社会经济、文化三种经审核的患者口吻复述，测试 12 个开源模型，发现模型在患者自述口吻下平均准确率下降 9.6 分（95% 置信区间 8.2 至 11.0），且规模变大后没有观察到差距缩小。
分类置信度
中 · 待人工复核
- 只有单一媒体来源，需要人工复核。
来源级别：媒体与个人
应用领域：医疗与生命科学
事件类型：研究发布
证据摘录
- “We pair 1,000 MedQA cases with three audited retellings (clinical, socioeconomic, cultural) and test 12 open models.”
来源：arXiv · cs.AI · arxiv.org