跳到正文
arXiv · cs.CL· Yuan Tian·· 19 天前精选AI 评分61

arXiv 论文提出诊断式规则判断 LLM Agent 何时应从 harness 进化转向权重训练

Harness Evolution Hits a Ceiling: When Weight Training Should Begin

来源与原文

arXiv · cs.CL

作者:Yuan Tian

发布时间:(北京时间)

阅读原始来源 · arxiv.org ↗
完整链接与内容说明

https://arxiv.org/abs/2610.11655v1

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

arXiv 论文(arXiv:2610.11655)提出按失败构成诊断 LLM Agent 的改进路径:进程类失败交给 harness 进化,内容类失败交给权重训练。在 DeepPlanning 上,自进化 harness 将 Qwen3.5-4B 的 held-out 分数从 0.16 提到 0.30、Qwen3.5-9B 从 0.32 提到 0.44;在进化 harness 轨迹上训练的 LoRA 适配器在原 harness 下为两种规模各加 +0.13,9B 上适配器单独即可匹敌完整进化线,内容失败从四分之一轨迹降到二十分之一;该方法还迁移到 WebArena-Lite(117 个未见任务上 +0.09)。

推荐理由

论文给出按失败构成在 harness 进化与权重训练之间做选择的诊断规则,并用 Qwen3.5 与 WebArena-Lite 数据支持其可迁移性。

来源:arXiv · cs.CL · arxiv.org