跳到正文
arXiv · cs.CL· Raimondas Lencevicius·· 8 天前精选AI 评分59

arXiv 论文研究 Agent harness 的上下文处理如何决定任务成败

When the harness decides success: state that cannot be re-observed

来源与原文

arXiv · cs.CL

作者:Raimondas Lencevicius

发布时间:(北京时间)

阅读原始来源 · arxiv.org ↗
完整链接与内容说明

https://arxiv.org/abs/2610.26632v1

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

论文研究 Agent harness 跨轮次处理上下文(丢弃、摘要、回放模型推理)何时改变 Agent 成败,而非只看成本。预注册合成实验显示,所需事实可重新查回时截断上下文几乎无损失,事实不可再观察时成功率降至随机水平,两种惩罚相差 92.5 个百分点(90% CI [89.5, 95.5]),第二家供应商一个模型的复现结果一致。在 ARC-AGI-3 上,Standard harness 与 Provider Adapter harness 存在 63 分差距,改摘要而非丢弃旧轮次并保留记笔记提示可恢复 86%,不保留提示恢复 43%,叠加供应商原生推理回放再恢复 57%;这些为单次运行的点估计。

推荐理由

论文用预注册实验拆解 harness 对 Agent 成败的影响,给出可量化的组件归因,对理解上下文管理设计有直接参考。

来源:arXiv · cs.CL · arxiv.org