跳到正文
热点事件持续更新

研究拆解 Outcome RL 收益:主要来自完成度与可靠性

1 篇报道1 个报道来源23 小时前更新

先了解这件事

AI 综述

Shan Yang 等人在 arXiv 发布论文,将 Outcome RL 模型相对基座思考模型的 pass@1 提升拆解为完成度、可靠性和覆盖面三部分,在固定 token 预算下比较 1.5B 到 32B 共 20 个已发布 RL 模型与其基座。结论是:预算紧张时增益主要来自“在预算内完成作答”(完成度),预算充足时增益主要来自可靠性;RL 极少解出基座解不出的问题,覆盖面在四个物理和数学题集上最多带来 2.1 个百分点。该研究针对的是物理与数学题目上的表现。论文还抽查了 144 道仅 RL 解出的物理题,复核后仅 3.5% 确实成立。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月26日
  1. arXiv · cs.CL精选
    Outcome RL 带来了什么:对 20 个 RL 模型的完成度、可靠性与覆盖面拆解

    一项 arXiv 论文将 Outcome RL 提升 pass@1 的来源拆解为完成度、可靠性和覆盖面三部分,在固定 token 预算下比较 1.5B 到 32B 共 20 个 RL 模型与其基座思考模型。结果显示基座常耗尽预算时 82% 的变化来自完成度,预算充足时增益主要来自可靠性;RL 极少解出基座解不出的问题,覆盖面最多带来 2.1 个百分点,抽查 144 道仅 RL 解出的物理题中仅 3.5% 经复核成立。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。