arXiv · cs.AI · Peter Chen, Ni Zhang, Ying Xu, Siyuan Zhang · 10 小时前模型评分66
预注册机制审计：大语言模型（LLM，Large Language Model） 智能体系统 25 个认知架构模块中 18 个未接入生产输出
Real Computation or Merely Naming? A Pre-Registered Mechanism Audit of 25 Cognitive-Architecture Modules in an LLM-Based Agent System
导读
一项预注册审计对基于本地大语言模型的智能体系统做了静态核查，发现其宣称的 25 个认知架构模块中有 18 个计算出的值从未到达任何生产输出。作者提出带行号证据和调用链追踪的四问静态审计协议，对 11 个模块预注册可证伪预测并执行干预，在第二个独立系统的 IIT-phi 核心上复现该协议，并做了两次修复实验作为阳性对照。
分类置信度
中 · 待人工复核
- 只有单一媒体来源，需要人工复核。
来源级别：媒体与个人
事件类型：研究发布
证据摘录
- “We audit a system claiming 25 cognitive mechanisms, pre-register falsifiable predictions for 11 modules and execute the interventions”
来源：arXiv · cs.AI · arxiv.org