研究者提出GRPO子组偏移基线调整方法
热点事件持续更新
研究者提出GRPO子组偏移基线调整方法
1 篇报道1 个报道来源8 小时前更新
先了解这件事
AI 综述
Jiaying Zhou等提出一种调整分组相对策略优化(GRPO)基线的方法:按解题策略把同一提示词下产生的多条采样轨迹分成子组,用单一带符号系数λ沿子组均值与全局均值的偏差平移基线,λ>0为对齐方向、λ<0为对比方向。该方法的改动仅限基线,不改动奖励信号与优化目标。 据其论文,研究针对同一提示词的多条轨迹落入异质子组时的基线调整问题展开,并称已对该方法进行评估。
AI 根据报道生成 · 2 小时前更新
最新进展11月3日 13:00
一个偏移、两个方向:用子组偏移调整 GRPO 基线报道时间线
沿着报道,了解事件的不同侧面。
11月3日
- arXiv · cs.AI一个偏移、两个方向:用子组偏移调整 GRPO 基线
研究提出用“子组偏移”调整分组相对策略优化(GRPO,Group Relative Policy Optimization)的基线:按解题策略把同一提示词下的多条采样轨迹分成子组,用单一带符号系数λ沿子组均值与全局均值的偏差平移基线,λ>0为对齐、λ<0为对比,且只改基线、不动奖励信号与优化目标。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。