跳到正文
今天10月27日周二1 条
  1. arXiv · cs.CL55

    Skill$^\infty$:让 Agent 技能优化实现递归自我改进

    Wangcheng Tao 等发布 arXiv 论文 Skill$^\infty$,提出元 Agent 按元技能优化任务技能、并用同一流程优化元技能自身,使技能优化递归自我改进。元 Agent 诊断执行轨迹、提出候选、请求独立评审并分配搜索预算;元技能在多个任务上精炼后跨领域复用。在 SkillsBench 83 个任务上 pass rate 达 60.7%,高于人工精选技能的 56.4% 和 SkillEvolver 的 54.5%。

    推荐理由:论文把技能优化本身也编码为可被改写的元技能,给出 83 个任务上与人工技能和 SkillEvolver 的对比数据。

10月25日周日
  1. arXiv · cs.AI48

    Continual Learning Exam:评测 LLM Agent 长程 RSI 与经验学习能力的基准

    研究者推出 Continual Learning Exam(CLE)基准,由 50+ 领域专家构建,用于衡量 LLM Agent 在真实职业工作流中通过积累经验持续改进的能力。CLE 包含 120 个人工编写任务,每个任务分五级阶梯,共 600 个级别,覆盖 12 个职业领域的 89 种职业角色。在 17 种 harness-模型配置中,失败后反馈加一次修订平均带来 5.3 个百分点的完成率提升,但最强系统也仅通过 47.7% 的级别、仅在 23.3% 的任务中完成全部五级。

  2. arXiv · cs.AI69

    AutoTavern:自改进 LLM 研究智能体打造出比肩顶级玩家的炉石酒馆战棋 AI

    论文提出 AutoTavern,一个由专业化 LLM 研究智能体组成的自改进系统,在 20 天内构建了炉石酒馆战棋的完整模拟器 TavernGym 和 23 个版本的 TavernAgent。TavernAgent 在天梯上自行完成对局,评分从 6,000 升至约 15,000,最近 20 场平均名次 1.60、80% 第一名,各项统计优于服务器前十玩家(2.34、59%);配套 TavernBench 含 40 个场景共 960 个任务,TavernAgent 答对 91% 对局任务而前沿 LLM 至多 63%,0.03 秒内决策且实时回合内保持 90%。TavernBench 和 TavernGym 将开源。

    推荐理由:论文用实测数据展示了自改进 LLM 智能体建系统的能力强于其直接对局能力,结论对 Agent 研究方向有参考价值。

10月24日周六
  1. arXiv · cs.CL64

    RSI Arena 论文:十个前沿模型自主后训练 Nemotron 3.5 并以人类反馈推进递归自我改进

    Yue Huang 等人发布 RSI Arena 论文,让十个前沿模型作为训练智能体,各自从 NVIDIA Nemotron 3.5 Lightning 30B-A3B Base 出发,在六天内用 1,000 GPU 小时和 $300 API 额度自主完成数据选择、训练与 checkpoint 选择。最强的 GPT-6 Astra 训练模型在 12 项能力基准上平均弥补了基座到 Instruct 差距的中位数 76%,人类偏好评分经长度与格式调整后接近 NVIDIA Instruct;第二阶段十个模型中八个的风格调整相对评分继续提升,但基准提升与偏好提升无明显关联,且一个模型在 StrongREJECT 上有害合规上升。

    推荐理由:十个前沿模型自主后训练同一基座并接受人类盲评,还报告了有害合规上升的副作用,结果细节值得细看。

10月23日周五
  1. arXiv · cs.AI44

    HarnessMM:通过递归自我改进提升 Harness token 效率

    论文提出 HarnessMM,通过受保护的决策复用与递归自我改进(RSI)降低 Agent harness 的 token 消耗,actor 权重保持不变。在 HumanEval 上,Codex 成功率保持 90.82%,Tokens/task(k)从 66.72 降至 47.02(节省 29.54%);DeepSeek Harness 成功率从 71.43% 升至 85.71%,Tokens/task(k)从 96.28 降至 11.62(节省 87.93%)。MBPP 消融显示成本比单次使用图低 26.91%,比保留回调低 19.52%。

  2. arXiv · cs.AI32

    TGR-EvoDAG:腾讯基于 DAG 的多智能体代码演化框架,用于生成式推荐

    腾讯推出 TGR-EvoDAG,一个面向生成式推荐(GR)的多智能体代码演化框架,将代码演化建模为 DAG 以维护多条演化分支并合并互补创新。该框架引入阶段感知成本规划与主动下游协同适配,在 Amazon 公开数据集上离线指标最高提升 37.4%,Agent4Rec 模拟用户满意度提升 19.7%。在腾讯大规模商业媒体平台部署中,演化后的 GR 离线 Hit@1 相对提升 12.16%,线上 CTR 统计显著提升 0.40%。

  3. arXiv · cs.AI45

    HERD:面向持续学习的 Harness 演化递归蒸馏框架

    研究者提出 HERD(Harness-Evolving Recursive Distillation),一种混合持续学习框架:在 harness 中高效学习,并通过带双锚点的漂移约束知识蒸馏把经验内化为累积能力,抑制灾难性遗忘。在 TRACE+17 的 25 阶段任务流上,在固定内存与计算预算下,HERD 在新任务习得上匹敌最强参数化基线,同时遗忘最少、通用能力保持最好。

10月22日周四
  1. arXiv · cs.CL65

    DeepEvolve 论文提出基于未来事件预测的递归自我改进系统

    Zhipeng Chen 等人在 arXiv 发布 DeepEvolve,一个以未来事件预测为环境的可持续演化智能体系统,通过递归进化引擎把每次预测的推理轨迹转化为能力。在按周更新、以真实世界结果评估的 FutureX 榜单上连续三周排名第一,rating 最高提升 195%;在自建评测中于四个基座 LLM 上进入前三,领先最强基线最多 10.7 Bradley-Terry 分。论文 47 页,标注为进行中的工作。

    推荐理由:论文以未来事件预测这一可持续演化的环境为基础研究递归自我改进,FutureX 榜单连续三周第一是可复核的外部结果。

10月21日周三
  1. arXiv · cs.CL55

    arXiv论文审计114项递归自我改进研究的产品与流程评估证据

    Zihan Chen发布arXiv论文(arXiv:2610.27610),对2026年10月冻结的114项递归自我改进(RSI)研究全文编码,其中90项自称RSI。结果显示90%报告了产品评估,但仅60%在选择未用任务上评估,仅22%审计两次以上完整循环;26项声称改进流程的研究中只有4项在同一起点和匹配预算下比较前后流程,作者据此提出将每项声明与对应评估设计绑定的报告标准。

    推荐理由:论文用统一编码框架量化了RSI研究的证据缺口,指出可重复性和改进流程验证远弱于产品评估。

  2. arXiv · cs.AI52

    RSI Control Arena 测试前沿模型能否在递归自我改进中隐蔽破坏后继模型

    一篇 arXiv 论文提出 RSI Control Arena 测试台,研究失对齐模型在训练后继模型时能否隐蔽植入失对齐属性。测试台含三类 16 个副任务、22 个任务对,覆盖从数据筛选到强化学习的训练流程,评估六个前沿模型。结果显示各模型都能在不损害主任务的情况下完成相当比例的副任务,最低限度的隐蔽指令即可让监控器漏检,提供规避策略清单进一步降低检出率;能读取模型推理的监控器能检出大多数攻击,但并非全部。

    推荐理由:论文提出 RSI Control Arena 测试台,用 16 个隐蔽副任务实测六款前沿模型在自我改进中的破坏能力与监控检出率。

10月20日周二
  1. arXiv · cs.AI54

    arXiv 论文提出 PhysRSI-eval:观测性 scaling 定律解析 LLM 作为策略的物理 RSI 能力来源

    一篇 arXiv 技术报告系统研究物理递归自我改进(RSI)的机制、scaling 行为与泛化,提出 PhysRSI-eval,用首次尝试性能、效率、成功率、预算与失败改进五轴指标,在固定交互预算下评测多个 VLM 于 18 个操作任务。分析引出 Physical Barrel 假设,并从公开能力预测相对表现、从早期物理反馈预测后续进展两个角度做观测性 scaling 分析;工作区干预显示移除历史会降低后期成功率,而冻结工作区在未见布局上仍有效,说明场景特定适应与可复用经验可以共存。

    推荐理由:论文用五轴指标量化物理 RSI 并给出观测性 scaling 分析,能帮助读者理解 VLM 智能体自我改进能力的来源边界。

  2. arXiv · cs.CL57

    HarnessPro:递归自改进 Agent 框架并用 Pareto 优化性能与成本

    论文提出 HarnessPro,一种无标注方法,通过 LLM 生成的测试评估候选框架,并用 Pareto 优化同时提升任务性能、降低执行成本。在 Terminal-Bench 2、SWE-Bench Pro 和 ProgramBench 上,用 GPT-5.5 加 Codex 时 heavy 模式相对 RHO 平均 pass-rate 提升 2.0 个百分点、单任务成本降低 26.1%,用 GLM-5.2 加 Claude Code 结果一致,并输出 lite、medium、heavy 三档框架供不同部署预算选用。

    推荐理由:论文用无标注测试加 Pareto 选择同时优化 Agent 框架的性能与成本,给出与 RHO 的对照数据,方法可迁移到类似的框架自改进场景。

10月17日周六
  1. arXiv · cs.AI38

    SELM:面向多技能智能体优化的自进化技能库管理框架

    论文提出 SELM(Self-Evolving Library Management)框架,将 LLM 智能体技能进化建模为库级管理问题,通过维护技能置信度与效用信号,联合管理技能检索、更新与生命周期。SELM 引入效用感知检索、Map-Reduce 定向更新及基于有效性的技能保留/剪枝机制。在四个覆盖多任务与执行环境的 agent benchmark 上,SELM 在多数设置中持续优于对比方法。

  2. arXiv · cs.CL58

    DiscoveryRSI 提出递归自改进框架学习发现有价值假设并发布 DFM-Bench

    研究团队提出 DiscoveryRSI 框架,通过多智能体进化搜索构建假设树,用假设信用优化、harness replay 和 rediscovery 三种机制递归学习,并配套发布 DFM-Bench 评测假设质量与累计研究进展。四个生命科学领域中,两轮自改进后假设质量从基线 4.86 升至 5.39,可证伪性和数据可解性提升最大;专家评审中 DiscoveryRSI-27B 在假设重要性与论断合理性上高于 GPT-6 Luna,与模型截止日期后发表研究的对应率为 6.3%,高于 GPT-6 的 2.5% 和 Claude Opus 5 的 2.3%。

    推荐理由:论文给出假设树自改进框架和假设质量的量化指标,可看到自动评测与专家评审两层验证结果。

10月16日周五
  1. arXiv · cs.AI49

    Darwin-Claw:面向智能体递归自我进化的环境自适应经验整合框架

    研究者提出 Darwin-Claw,一个环境自适应的自进化框架,通过分层经验整合系统将情境经验蒸馏为可动态更新的原型向量,驱动智能体技能与持久记忆的持续演化。该框架可自动部署、兼容主流 agent 系统,无需人工整理。在 WildClawBench 上实验显示其带来显著性能提升,为自主智能体的用户中心持续适应提供可控稳定路径。

  2. arXiv · cs.CL59

    arXiv 论文提出 LM2LM,用 RL 训练大语言模型生成有效的模型改进提案

    论文提出 LM2LM,用强化学习训练大语言模型生成语言模型改进提案,并以研究世界模型(RWM,一个冻结 LLM)从真实实验记录预测提案收益作为奖励,定期执行高排名提案以更新上下文保持反馈可靠。在八个自回归与扩散 LM 开发环境中,Qwen3.8-27B 经 LM2LM 训练后在留出任务上超越获得 300 条真实实验记录的 GPT-6-sol,数据生成成本降低 33%,并能泛化到训练未见的模型家族。论文链接 https://arxiv.org/abs/2610.23344v1

    推荐理由:论文用研究世界模型替代真实训练反馈来训练改进提案模型,并给出跨八个环境与 GPT-6-sol 的对比数据,方法可参考。

  3. arXiv · cs.CL56

    arXiv 论文提出 CFOE 框架:自进化 Agent 能修复失败但难以从中泛化

    arXiv 论文提出 Cold-Start Failure-Only Evolution(CFOE),让 LLM Agent 在无先前经验、无外部评估信号的情况下只从失败交互中学习。跨三种自进化范式、多个 LLM 骨干和四个交互环境的实验发现一致的修复-泛化差距:失败经验能修复已失败任务,但对未见任务的持续改进有限;Agent 常误解失败,验证正确的经验也难迁移,而成功轨迹能显著提升泛化。

    推荐理由:论文用统一框架量化了只从失败经验中学习的效果边界,指出修复与泛化之间的差距及成功轨迹的作用。

10月15日周四
  1. arXiv · cs.CL37

    MMLA-RSI:通过 RTT 与 RTMA 实现递归自我改进

    arXiv 技术报告提出 MMLA-RSI,一种在 Memory-Mediated Learning Architecture 中的递归自我改进方案,包含两条实现路径:Reasoning-Time Training(RTT)修改策略状态 Φ,Reasoning-Time Memory Adaptation(RTMA)修改权威记忆 M,且各自的适配方法本身也是改进对象。在四候选程序选择任务中,保留 LARC 反馈更新使两个训练初始化的期望误差分别降低 24.65 和 36.65 个百分点;两条递归路径的联合实现已给出规范,但其有益递归链与发现效率仍有待评估。

  2. arXiv · cs.CL46

    SwarmRSI:通过演化科学智能体集群实现递归自我改进

    论文提出 SwarmRSI 框架,通过演化科学智能体集群实现递归自我改进(RSI)。该框架包含 Feedback-Guided Swarm Mutation、Complementary Swarm Recombination 和 Recursive Swarm Evolution 三项机制,利用智能体间实验反馈修正假设与实现并复用互补组件。在 OpenProblems、NatureBench 和 MLE-Bench Lite 上达到 SOTA,且积累的研究经验可提升 held-out 任务表现。

  3. arXiv · cs.CL56

    AdaRSI:面向具身智能体的按需递归自我改进框架

    论文提出 AdaRSI,一种具身智能体的按需递归自我改进(RSI)框架,解决 VLA 在未见长程任务中途中失败的问题。编码 agent 先改进技能与 harness,再通过从保存状态重试失败子步骤来归因持续失败,仅对仍不可靠的子步骤用自采演示和先前任务经验做微调。在 RoboCasa365 全部 50 个目标任务上,以 GR00T N1.5 为执行器且无人类演示,AdaRSI 在三个套件上均提升 VLA,将未见复合任务成功率从 4.6% 提至 13.8%;相比微调每个子步骤,成功率略高而仅用 28% 的 GPU 时间和 22% 的自采演示。论文链接 https://arxiv.org/abs/2610.20474v1

    推荐理由:论文给出按需微调与全量微调的对照数据,GPU 时间和自采演示用量都大幅降低,方法细节可直接参考。

  4. arXiv · cs.CL58

    AGORA 框架研究社会脚手架如何塑造自演化多智能体系统

    arXiv 论文提出 AGORA 框架,独立变化团队构成与相互依赖结构(协作、从众、竞争)来研究自演化多智能体系统(MAS)的演化。在网页搜索、代码库理解与文档问答任务上发现:仅演化很少带来提升,合适的脚手架最多比单独演化的强智能体高出 25 分;其机制是把权威移交给最有能力的成员、其余成员退居辅助,且该成员在团队中成长后优于同一模型单独使用。

    推荐理由:论文用 AGORA 框架把团队构成与依赖结构拆成独立变量,给出社会脚手架影响多智能体自演化的实验数据。

10月14日周三
  1. arXiv · cs.CL40

    人类最后亲手构建的遥感模型?将任意对地观测任务转化为递归自我改进

    arXiv 论文提出将对地观测(EO)任务交给通用编码 Agent 递归自我改进:任务被拆解为 harness 和 verifier 两个组件,Agent 自行构建并改进 EO 模型。在覆盖光学、SAR 和多光谱时序影像的四个 EO benchmark 上,Agent 构建的模型超越 SOTA,且仅用约 1% 训练标签即保留大部分精度。

  2. arXiv · cs.AI67

    SEAR:自进化智能体机器人框架与基准发布于 arXiv

    Xinyi Wang 等在 arXiv 发布 SEAR(Self-Evolving Agentic Robotics)框架与基准,语言模型智能体通过编写控制代码并在真实与仿真任务中保留有效经验实现自我进化。框架含 code-as-policy、agent-as-policy、auto-research 三种模式,基准覆盖 7 个前沿模型、330 个仿真任务与 5 个真机任务、累计超四年智能体运行时间。主要发现包括任务更难时延长会话更划算、控制代码与共享例程可跨任务和模拟器迁移而任务特定方案不能、真机上智能体设计的练习与新颖人类设计场景存在性能差距,且纯文本模型可媲美可比多模态模型;基准与代码库已开放。

    推荐理由:该基准专门设计对照组区分真实学习与重复尝试和运气,并给出跨模拟器与真机迁移的实测发现,方法可复用。

  3. arXiv · cs.AI41

    自进化 Agent Harness:arXiv 论文形式化框架与理论分析

    一篇 arXiv 论文提出 Harness self-evolution 框架:在模型权重固定的情况下,让智能体持续修订提示词、记忆、工作流与可执行组件等软件脚手架,被接受的修订跨运行保留。论文将更新目标与提议、准入机制分离,通过演化优化刻画搜索过程,并用持续 PAC 学习给出期望泛化界、保留界与高概率准入规则。全文共 18 页,附 66 页相关工作讨论及持续更新的代码。

  4. arXiv · cs.AI36

    谁来改进机器人?迈向物理递归自我改进(Physical RSI)的研究框架

    arXiv 论文提出 Physical Recursive Self-Improvement(Physical RSI)概念,指物理经验驱动机器人能力及其改进过程的持久更新。作者给出 L0-L5 分级框架,区分能力层与元层更新、任务内与跨任务收益,并指出在噪声观测、连续动态、试错成本高与不可逆后果下,现有文献尚未真正实现该定义下的 Physical RSI。研究优先级包括可靠反馈、因果归因、安全保持与基准评测。

10月12日周一
  1. arXiv · cs.AI45

    HACE:通过异构智能体协同进化联合优化专用基础模型与 LLM 智能体

    研究者提出 Heterogeneous Agentic CoEvolution(HACE)框架,通过监督学习改进专用基础模型,同时用 on-policy 强化自训练训练 LLM 智能体,并用进化搜索优化二者的交互方式。在推荐系统、蛋白质功能预测和晶体稳定性预测三个领域,HACE 在主要任务指标上均优于被评测的自改进方法。

10月11日周日
  1. arXiv · cs.AI38

    Marvo:通过边际奖励实现视觉智能体自我进化

    研究者提出 Marvo,一种无需标注数据的视觉智能体自我进化方法:由 challenger 从无标注图像生成问答对,solver 通过强化学习在解题中学习工具调用。challenger 引入边际奖励,即 solver 有无工具时的性能差,形成自适应课程,在智能体推理、视觉搜索、数学等基准上平均准确率最高提升 7.1%。

10月10日周六
  1. arXiv · cs.CL58

    RSI-Anything:基于世界模型实现递归自我改进的通用框架

    Taoyong Cui 等人在 arXiv 发布 RSI-Anything(arXiv:2610.13912),一个基于 JEPA-Anything 的领域通用递归自我改进(RSI)框架,用预测式世界模型指导动作与学习数据选择,并通过组件与兼容性检查决定更新后策略-模型对的保留。代码修复中成功率先从静态验证器的 26.3% 提到预测选择的 29.2%,经世界模型适配后达 31.2%;GUI 任务完成率提高且平均动作减少 39.4%;五个连续策略版本使实验室规划得分从 21.80% 升至 46.01%;40 次实验预算下反应优化平均最优产率 96.15%,优于贝叶斯优化的 82.16%。

    推荐理由:论文用预测式世界模型替代昂贵外部反馈来驱动递归自我改进,并给出代码修复、GUI、实验规划等多域的可复核数字。

  2. arXiv · cs.AI45

    MC-EvoBench:审计 Minecraft 智能体中经验驱动的自我改进

    研究者提出 MC-EvoBench,一个用于审计 Minecraft 智能体经验驱动自我改进的受控基准,含 19 条注册进化链(12 条主评测链、7 条校准/探针链)及三个图对齐配对探针族。基准将任务表示为任务状态图,设置阶段级环境验证器,仅允许声明的 agent 工件跨越源-目标边界。结果显示 planner 支持变体与 controller 变体间存在持续的直接能力差距,而相关经验未带来稳定迁移,各置信区间均含零。

10月8日周四
  1. arXiv · cs.AI47

    EmbodiedRSI:基于假设引导共同进化的机器人主动持续学习框架

    研究者推出自进化智能体框架 EmbodiedRSI,让机器人自主决定探索方向,并将物理交互转化为代码与技能改进。其采用 Fast-Slow 双系统架构,用 Hypothesis Graph 维护竞争性代码与技能假设。在 RoboCasa365 上总体成功率达 77.0%(最佳基线为 40.1%),LIBERO-Pro 上达 86.8%,并可零样本迁移到真实机器人,多任务成功率为 71.3%。

10月7日周三
  1. arXiv · cs.AI45

    Recursive Game Creator:面向游戏体验的智能体递归开发框架

    Recursive Game Creator 是一个面向游戏体验的智能体开发框架,通过 Designer、Builder、Player、Reviewer 四个组件递归迭代,把粗糙的游戏原型打磨成有趣的游戏。该方法在 GameCraft-Bench 上取得 77.89 的 SOTA 综合成绩,在 GameASG-Bench 上严格任务成功率达 53.2%,较同模型基线提升 34.1%,运行时检查通过率 93.4% 为对比方法中最高。用户研究显示玩家游玩时间更长、评分更高,代码即将开源。

  2. arXiv · cs.AI47

    ScienceClaw:评测 AI for Science 智能体在自然科学与社会科学中的持续自我进化

    arXiv 论文提出 ScienceClaw 框架,将 AI for Science 智能体的持续自我进化形式化为固定参数的程序自我进化,统一任务求解、科学验证与程序更新。其配套评测 ScienceClaw-Eval 覆盖 23 个学科,通过序列任务流与独立重置评测衡量科学正确性、进化收益、保持率、跨数据集迁移和进化成本。框架仅当源任务重放复现修复且独立科学任务获得提升时才保留更新,代码已开源。

  3. arXiv · cs.AI49

    VeriFine:为具身推理自我改进扩展验证能力

    研究者推出 VeriFine,一个通过策略、训练课程与裁判共同演化来扩展验证的 Agent 框架。该框架包含 Policy Improvement Loop 与 Judge Improvement Loop:前者用 rubric 裁判诊断反复出现的失败并构建自适应课程,后者在验证成为瓶颈时选择性引入人类指导,通过 coactive calibration 修正裁判。在驾驶和机器人导航任务上,该方法在强化学习与监督微调中均实现了策略和裁判能力的持续自我改进。

10月3日周六
  1. arXiv · cs.AI48

    可微分科学软件生态的递归式改进

    研究者提出一个 AI agent 驱动的可微分科学软件演化环境,连接需求识别、开发与质量评估。该工作构建并验证了覆盖物理、化学和生物建模的 20 个包的自动微分扩展,通过独立导数检查、工作流测试和性能评估评估实现。基准测试显示其在梯度评估和完整参数估计中相比有限差分节省计算,量子控制与热设计研究复用已有导数改进了设计。