跳到正文
热点事件持续更新

CivicBench 基准与 TSM 框架发布

1 篇报道1 个报道来源8 小时前更新

先了解这件事

AI 综述

Yangyu Wu 等作者发布 CivicBench 基准和任务状态记忆(TSM)框架。CivicBench 覆盖四座城市、两年市政网页数据,包含 400 个任务;它把网页数据固化为可复现的数据包,并用可执行契约检查计算、来源链接、覆盖范围,以及无依据时是否拒绝作答。 TSM 把工具观察结果编译为带类型的断言,并按兼容范围对齐记录。作者报告,在九组完整模型配对中,八组的平均分差为正,且 95% 置信区间不含零。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月3日
  1. arXiv · cs.AI
    CivicBench:面向市政网页数据分析的基准与记忆框架

    CivicBench 是一个覆盖四座城市、两年数据的 400 任务基准,把市政网页数据固化为可复现的数据包,并用可执行契约评估计算、来源链接、覆盖范围与无依据时拒绝作答。研究同时提出任务状态记忆(TSM,Task-State Memory),将工具观察编译为带类型的断言并按兼容范围对齐记录。在九组完整模型配对中,八组的平均分差为正且 95% 置信区间不含零。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。