arXiv · cs.AI· Chen Xi·· 18 天前AI 评分42
Rollout-Time Intervention(RTI):突破策略边界解锁智能体强化学习
Rollout-Time Intervention: Unlocking Agentic Reinforcement Learning Beyond Policy Limits
来源与原文
arXiv · cs.AI
作者:Chen Xi
发布时间:(北京时间)
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.13438v1
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
研究者提出 Rollout-Time Intervention(RTI),在 rollout 阶段利用奖励侧证据(评测 rubric)将错误轨迹转化为成功轨迹,缓解智能体 RL 的 on-policy 推理瓶颈。过滤分布偏移过大的轨迹后,这些 off-policy 轨迹仍能有效引导策略优化。在五个 benchmark 上 RTI 持续超越 RL 基线,使后训练策略接近更强的当代 LLM 并突破原有能力边界,代码已开源。
来源:arXiv · cs.AI · arxiv.org