跳到正文
arXiv · cs.AI· Zhenghong Ke·· 17 小时前AI 评分40

SCARL:序列置信度对齐强化学习

SCARL: Sequence Confidence-Aligned Reinforcement Learning

来源与原文

arXiv · cs.AI

作者:Zhenghong Ke

发布时间:(北京时间)

阅读原始来源 · arxiv.org ↗
完整链接与内容说明

https://arxiv.org/abs/2610.40407v1

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

论文提出 SCARL(Sequence Confidence-Aligned Reinforcement Learning),针对 RLVR 中策略置信度与奖励错位的问题,用组内相对置信度与结果之间的对齐差重塑各样本的 advantage。在 Qwen3-4B-Base 上,SCARL 将平均 Pass@32 较 DAPO 提升 2.4 分,在九个算力对齐方法中覆盖率和单次准确率均最佳;跨四个估计器和四个主干在 16 个设置中的 14 个取得提升,同时保持策略熵并缓解熵坍缩,代码已开源。

来源:arXiv · cs.AI · arxiv.org