跳到正文
arXiv · cs.AI · Zijie Liu, Qi Yang Huang, Jinhao Duan, Yueh Che Lee, Thomas A. Joseph, Zayne Turner, Adam Seligman, Tianlong Chen, Zhaozhuo Xu · 9 小时前模型评分44

AgentOrch 基准:全局编排与逐步交互的准确率差距有多大?

AgentOrch: How Close Can Global Orchestration Come to Step-by-Step Interaction?

导读

AgentOrch 基准在 650 条企业标准作业程序和 3,220 个运行时变体上,用匹配的工具、环境和评测直接比较全局编排与逐步交互。逐步交互在所有被测模型上仍更准确,但差距从早期模型到最强近期模型已缩小约 79%。

生成六维分析
分类置信度

中 · 待人工复核

  • 只有单一媒体来源,需要人工复核。

来源级别:媒体与个人

事件类型:研究发布

证据摘录

  • “We introduce AgentOrch, a benchmark that directly compares global orchestration with step-by-step interaction on 650 enterprise SOPs and 3,220 runtime variants under matched tools, environments, and evaluation.”

来源:arXiv · cs.AI · arxiv.org