研究审计六款大模型戒烟建议的人设差异

Artin Yousefi 等作者发布了一项审计研究：他们向四家厂商的六款大语言模型提出同样的四个戒烟问题，并搭配生命阶段、自述专业程度和吸烟史各不相同的十二种用户画像，共收集 2880 条回答。研究发现，模型给出的戒烟建议内容取决于提问者看起来是谁。作者已公开全部 2880 条回答和分析代码。 作者称，提示词缩小了每个模型中的人设差异，但它对整体事实覆盖的影响在不同模型之间方向和幅度都不同，因此在一个系统上验证过的提示词，不能假定可以直接迁移到另一个系统。由于每个用户画像同时变动多个属性，研究只报告场景层面的差异，没有给出年龄或专业程度的单独效应。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。