arXiv · cs.AI · Jiaju Chen, Yuxuan Lu, Jiayi Su, Chaoran Chen, Songlin Xiao, Zheng Zhang, Yun Wang, Yunyao Li, Jian Zhao, Tongshuang Wu, Toby Jia-Jun Li, Dakuo Wang, Bingsheng Yao · 9 小时前模型评分42
ALMANAC：面向智能体协作的人类协作数据集，含动作级心智模型标注
Humans' ALMANAC: A Human Collaboration Dataset of Action-Level Mental Model Annotations for Agent Collaboration
导读
研究者发布 ALMANAC 数据集，基于社会科学经典双人路径任务 Map Task 构建，包含 2,987 个协作动作，每个动作都配有记录参与者自我推理、感知伙伴意图和感知团队目标的心智模型标注。团队用该数据集评测六个大语言模型预测人类下一轮行为与心智模型的能力，结果显示其可用于评估模型模拟人类协作行为、推断其心智模型的表现。该数据集已被 EMNLP 2026 接收为 Findings。
分类置信度
中 · 待人工复核
- 只有单一媒体来源，需要人工复核。
来源级别：媒体与个人
事件类型：研究发布
证据摘录
- “To bridge this gap, we present ALMANAC, a dataset of Action-Level Mental model ANnotations for Agent Collaboration built from the Map Task, a classic dyadic routing task from social science.”
来源：arXiv · cs.AI · arxiv.org