跳到正文
arXiv · cs.AI· Jiale Huang·· 20 小时前AI 评分38

SetGRPO:校准评分器引起的策略优化

SetGRPO: Calibrating Grader-Induced Policy Optimization

来源与原文

arXiv · cs.AI

作者:Jiale Huang

发布时间:(北京时间)

阅读原始来源 · arxiv.org ↗
完整链接与内容说明

https://arxiv.org/abs/2610.36807v1

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

arXiv 论文提出 SetGRPO(Set-Valued Group Relative Policy Optimization),解决基于评分标准的强化学习中评分器随机性改变 GRPO 更新的问题。方法包含联合奖励集校准、几何引导安全恢复和选择性风险门控优化三个模块,在可交换性下提供有限样本边际覆盖与同步风险控制。在覆盖三个领域的十个开放式基准上,SetGRPO 在 Qwen3.5 和 Llama3.2 模型族的宏平均中均居所有对比训练方法之首。

来源:arXiv · cs.AI · arxiv.org