arXiv · cs.AI· Haoyu Zhao·· 2 天前AI 评分48
Continual Learning Exam：评测 LLM Agent 长程 RSI 与经验学习能力的基准
Continual Learning Exam: Benchmarking Long-Horizon RSI and Experiential Learning in LLM Agents
来源与原文
arXiv · cs.AI
作者：Haoyu Zhao
发布时间：（北京时间）
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.33956v1
本站目前仅有 AI 导读与摘要，未展示原文正文；技术细节、代码和完整结论请查看原始来源。
AI 导读
研究者推出 Continual Learning Exam（CLE）基准，由 50+ 领域专家构建，用于衡量 LLM Agent 在真实职业工作流中通过积累经验持续改进的能力。CLE 包含 120 个人工编写任务，每个任务分五级阶梯，共 600 个级别，覆盖 12 个职业领域的 89 种职业角色。在 17 种 harness-模型配置中，失败后反馈加一次修订平均带来 5.3 个百分点的完成率提升，但最强系统也仅通过 47.7% 的级别、仅在 23.3% 的任务中完成全部五级。
来源：arXiv · cs.AI · arxiv.org