arXiv · cs.CL· Shan Yang·· 23 小时前精选AI 评分62
Outcome RL 带来了什么:对 20 个 RL 模型的完成度、可靠性与覆盖面拆解
What Outcome RL Buys: Finishing, Reliability, Rarely Reach
来源与原文
arXiv · cs.CL
作者:Shan Yang
发布时间:(北京时间)
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.34894v1
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
一项 arXiv 论文将 Outcome RL 提升 pass@1 的来源拆解为完成度、可靠性和覆盖面三部分,在固定 token 预算下比较 1.5B 到 32B 共 20 个 RL 模型与其基座思考模型。结果显示基座常耗尽预算时 82% 的变化来自完成度,预算充足时增益主要来自可靠性;RL 极少解出基座解不出的问题,覆盖面最多带来 2.1 个百分点,抽查 144 道仅 RL 解出的物理题中仅 3.5% 经复核成立。
推荐理由
论文把 RL 带来的 pass@1 提升拆成完成度、可靠性和覆盖面三部分,量化了 Outcome RL 很少解出新题这一结论。
来源:arXiv · cs.CL · arxiv.org