跳到正文
热点事件持续更新

GENSTRAT发布程序化生成博弈评测基准

1 篇报道1 个报道来源11 小时前更新

先了解这件事

AI 综述

作者Vartan Shadarevian等发布GENSTRAT,用程序化生成的双人零和不完全信息下注博弈评测大语言模型的策略推理能力,并建立含50局游戏的基准。 该基准按状态空间、时序偶然性等五个复杂度维度刻画每局游戏,让12个前沿与开放权重模型进行了超过4万场对战。结果显示,在8局最难游戏上,最好与最差模型的差距是全部游戏上差距的1.7倍;更高的思考预算、向模型披露对手策略、以及与游戏需求匹配的推理深度,都与模型更高的胜率差相关。

AI 根据报道生成 · 4 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月2日
  1. arXiv · cs.AI
    GENSTRAT:用程序化生成博弈评测大语言模型的策略推理能力

    GENSTRAT 通过程序化生成双人零和不完全信息下注博弈,按状态空间、时序偶然性等五个复杂度维度刻画每局游戏,并构建了 50 局基准,让 12 个前沿与开放权重模型进行了超过 4 万场对战。结果显示,在 8 局最难游戏上,最好与最差模型的差距是全部游戏上差距的 1.7 倍;更高的思考预算、向模型披露对手策略、以及与游戏需求匹配的推理深度,都与模型更高的胜率差相关。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。