跳到正文
热点事件持续更新

RoRo:用评分标准引导逐步模型路由

1 篇报道1 个报道来源8 小时前更新

先了解这件事

AI 综述

研究者提出 RoRo 框架,为逐步模型路由引入过程奖励。此前这类路由只用结果奖励,无法评估中间的每一步路由决策;RoRo 先收集多样路由轨迹,按结果、成本与过程质量构建偏好对,再交替训练两个组件:生成查询专属评分标准的 Rubricor,和依据该标准打分的 Judge,将过程奖励与结果奖励结合,通过 GRPO 优化路由策略。 在五个推理基准上,同家族与跨家族设置下 RoRo 均优于强基线,取得更好的准确率与成本权衡。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月3日
  1. arXiv · cs.AI
    RoRo:用评分标准引导的过程奖励优化逐步模型路由

    针对逐步模型路由中结果奖励无法评估中间路由决策的问题,研究者提出 RoRo 框架,先收集多样路由轨迹并按结果、成本与过程质量构建偏好对,再交替训练生成查询专属评分标准的 Rubricor 和据此打分的 Judge,将过程奖励与结果奖励结合,通过 GRPO 优化路由策略。在五个推理基准上,同家族与跨家族设置下 RoRo 均优于强基线,取得更好的准确率与成本权衡。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。