arXiv · cs.AI · Rongzhe Wei, Ge Shi, Min Cheng, Sarthak Ghosh, Vaibhav Gorde, Leman Akoglu, Pan Li, Na Zhang · 5 小时前模型评分49
SLATE:面向电商工具使用的大规模长程 应用程序编程接口(API,Application Programming Interface) 选择基准
SLATE: A Large-Scale Benchmark for Long-Horizon API Selection in E-commerce Tool Use
导读
研究者发布 SLATE(Synthetic Large-scale 应用程序编程接口(API,Application Programming Interface) Toolkit for E-commerce)基准,用于测试大语言模型智能体在约 1,000 个电商工具库中完成长程 API 选择。
分类置信度
中 · 待人工复核
- 存在未解决的相邻类别:ai-tooling,需要人工复核。
- 只有单一媒体来源,需要人工复核。
来源级别:媒体与个人
应用领域:零售与营销
事件类型:研究发布
证据摘录
- “We introduce SLATE (Synthetic Large-scale API Toolkit for E-commerce), a large-scale benchmark that tests large-toolset, long-horizon API selection in a realistic enterprise domain.”
- “We release SLATE, its simulator, and the evaluation harness at this https URL”
来源:arXiv · cs.AI · arxiv.org