跳到正文
arXiv · cs.AI· Chen Xi·· 18 天前AI 评分42

Rollout-Time Intervention(RTI):突破策略边界解锁智能体强化学习

Rollout-Time Intervention: Unlocking Agentic Reinforcement Learning Beyond Policy Limits

来源与原文

arXiv · cs.AI

作者:Chen Xi

发布时间:(北京时间)

阅读原始来源 · arxiv.org ↗
完整链接与内容说明

https://arxiv.org/abs/2610.13438v1

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

研究者提出 Rollout-Time Intervention(RTI),在 rollout 阶段利用奖励侧证据(评测 rubric)将错误轨迹转化为成功轨迹,缓解智能体 RL 的 on-policy 推理瓶颈。过滤分布偏移过大的轨迹后,这些 off-policy 轨迹仍能有效引导策略优化。在五个 benchmark 上 RTI 持续超越 RL 基线,使后训练策略接近更强的当代 LLM 并突破原有能力边界,代码已开源。

来源:arXiv · cs.AI · arxiv.org