跳到正文
arXiv · cs.AI· Ronghan Li·· 18 天前AI 评分30

GRPO 中课程难度递进的收益与局限:难度递进一步到位并非越难越好

A Step Harder, Not a Step Too Far: The Benefits and Limits of Curriculum Difficulty Progression in GRPO

来源与原文

arXiv · cs.AI

作者:Ronghan Li

发布时间:(北京时间)

阅读原始来源 · arxiv.org ↗
完整链接与内容说明

https://arxiv.org/abs/2610.13669v1

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

一项 arXiv 研究重新在当前策略下估计样本难度,并设计 GRPO 分阶段课程,将活跃难度带逐步推向更难样本。GSM8K 实验中,三个随机种子下递进到中等偏难难度带使测试准确率达到 0.6591±0.0077,高于固定中等难度的 0.6449±0.0024;但进一步递进到更难难度带则降至 0.6405±0.0053。结果表明难度递进的收益是非单调的,有效课程应超越中等难度但避免过度拔高。

来源:arXiv · cs.AI · arxiv.org