跳到正文

内容形态

论文与研究 最新动态

论文与技术报告:对齐机制、人格可控性、评测方法与能力边界的新发现。

403 条精选近 30 天 403 条共收录 2,997 条

更新

精选归档 · 第 8 页

10月16日周五第 141–160 条
  1. arXiv · cs.AI56

    Librarian Agents 论文提出用强化学习训练 LLM 预先整理长上下文工作区

    论文提出 Librarian Agents 框架,由 builder agent 把原始文档整理成层级化合成文件工作区,并将构建过程建模为 MDP、用强化学习直接优化下游答题准确率。方法在 BrowseComp-Plus 上比最强检索与预计算基线高 33 个百分点,并在 BRIGHT 上零样本泛化,平均准确率提升 31 点。

    推荐理由:论文把工作区构建建模为 MDP 并用 RL 直接优化下游答题准确率,方法路径和基线对比对长上下文 Agent 研究有可迁移参考。

  2. arXiv · cs.AI56

    LEASH:面向计算机使用智能体的不确定性感知弱到强升级与监督框架

    arXiv 论文提出 LEASH,一个免训练框架,让弱模型默认执行任务,仅在其潜在不确定性升高时把控制权交给强模型,并在交接后用 shadow observer 持续监督黑盒强模型。在 OSWorld 上,LEASH 在相同升级率下比随机升级高 6.55-11.94 分;用 Qwen3.5-35B-A3B 达到 73.66% 任务成功率、每任务 $0.4117,与常驻 Claude Opus 5(72.90%)持平,同时推理成本降低 19.2%。不确定性估计复用动作生成时已产生的激活,无需额外前向传播或专门训练监控器。

    推荐理由:论文给出弱到强按需升级的具体做法和成本对比,弱模型默认执行、仅在不确定性高时交给强模型,成本账算得清楚。

  3. arXiv · cs.AI65

    四个 Gemini 4 Argon 智能体自主通关 Minecraft

    研究者将四个 Gemini 4 Argon 智能体放入沙盒化的 Minecraft 生存世界,目标是击败末影龙,每个智能体通过开源库 Mineflayer 控制一名玩家,靠游戏内聊天和共享记忆协调,没有人类分配角色或编写游戏逻辑。团队从随机生成的 Easy 难度世界出发,编写了 2,783 个程序,死亡 605 次,用 27 小时 14 分钟击败了末影龙。作者称这是据其所知首次由 AI 智能体仅用标准 Mineflayer 库、无预探种子等人类专用工具完成的端到端自主通关,论文还描述了分工、知识共享、互相恢复物品等策略与结果局限。

    推荐理由:论文给出了完整运行数据与协作策略描述,读者可以据此了解多智能体长时程自主任务的实际做法和局限。

  4. arXiv · cs.AI69

    MLExpert 论文提出后训练方法,将 35B MoE 模型训练为自主机器学习工程智能体

    论文提出面向长时程自主机器学习工程优化的后训练方法,训练出 35B Mixture-of-Experts 智能体模型 MLExpert。方法包括构建可执行任务的 Kaggle-MLE Factory、层级 agentic SFT,以及将两次实验结果之间的多轮决策作为一个执行窗口并赋予共享结果奖励的 Windowed Interaction RL(WIRL)。在 MLE-Bench Lite 上,MLExpert 将基座模型平均奖牌率从 37.9% 提升到 72.7%,达到与 Kimi-K3、GLM-5.3 等更大前沿模型相当的水平,并在 NatureBench Lite、agent scaffold 优化和算法优化上显示能力可泛化。

    推荐理由:论文展示了用层级SFT加窗口化RL把35B模型训练成自主机器学习工程智能体的完整后训练方法,MLE-Bench Lite数字可作参考。

  5. arXiv · cs.AI53

    FDE-Gym 基准发布:评测 AI 智能体的真实客户交付能力

    arXiv 论文提出 FDE-Gym 基准,包含来自 20 个真实客户场景、18 个行业的 95 个端到端交付任务,考察智能体澄清模糊需求、发现未言明约束并在生产级系统上交付方案的能力。评分以客户自身成功指标的改进归一化(0 到 1),并对与利益相关者的交互(消息、试运行、等待时间)施加惩罚;同时评测了 7 家提供商的 13 个模型配置,最佳配置平均分 0.56,仅完成 14/95 个任务(得分至少 0.8 且无事故)。主要瓶颈是发现未言明约束,但即便在 23 个拿到全部关键事实的任务上,最佳配置也只有 10 个达到 0.8 以上的业务提升,显示解决明确任务与真实客户交付之间存在显著差距。配套有在线练习平台、代码和数据。

    推荐理由:基准把交付结果量化为对客户业务指标的改进,还给出 13 个模型配置的实测对比和瓶颈定位,便于评估真实交付能力差距。

  6. arXiv · cs.AI54

    CoDA 论文提出仿真数据引擎与动作策略共同进化框架

    论文提出 CoDA 框架,让仿真数据引擎与动作策略通过共享异构记忆共同进化,记忆将视觉语言评论家的诊断编译为生成程序与训练程序,并用 Text2potential 为动作块价值学习提供密集监督。在四个操作任务族上,分布外成功率从 SFT 后的 5.3% 提升到 27.6%,比最强闭环基线高 9.5 个百分点;LIBERO-Pro 上 15 轮生成与训练使位置扰动下成功率从 25% 升至 84%,指令扰动下从 1% 升至 76%。

    推荐理由:论文提出仿真数据引擎与动作策略共同进化的训练框架,并给出分布外成功率的实测对比,方法思路可迁移到机器人策略训练。

  7. arXiv · cs.CL54

    System1-Arena:评测哪些决策可以交给 System 1 模型

    论文提出 System1-Arena 基准,统一给模型相同的决策请求并按概率打分,考察哪些决策可交给单次前向的 System-1 模型、哪些需要生成式推理。基准含 105 个任务的 92k 题目和 138 个闭环环境,评测 30 个模型;最大的 System-1 模型在非智能体任务上达到或超过快速闭源 LLM,延迟仅四分之一,推理型 LLM 最准确但成本约为快速 LLM 的 70 倍,闭环中大型开源 LLM 成功率最高(至多 32.9%)。

    推荐理由:论文用统一基准量化 System-1 与 System-2 模型的决策分工,读者可借此判断哪些决策不必走生成式推理。

  8. arXiv · cs.CL54

    arXiv 论文提出扰动可控基准审计医疗 LLM 智能体升级可靠性

    华盛顿大学圣路易斯分校等团队发布 arXiv 论文 arXiv:2610.21270,用 400 个合成医疗工作流 episode 审计 LLM 智能体在证据缺失、过期、冲突或延迟时的升级(escalate)决策,按 5:1 漏报与不必要升级成本计分。五个 1.7B–9.7B 开源权重配置干净决策准确率达 0.97,但不确定性触发的模型漏掉 32–97% 的必要升级,9.7B 配置在冲突下从 0.97 降到 0.78;语言化置信度不一致(ECE 0.10–0.54)。工作流感知控制器将漏升级降到 0.12–0.24、特异性 0.83–0.93,但 30 概念词汇压力测试使其规则检测器在未见改写上的召回从 1.00 降到 0.00,结论限于该基准。

    推荐理由:论文量化了医疗 LLM 智能体在证据缺失或冲突时漏掉升级请求的比例,并提示路由控制器也要单独做泛化测试。

  9. arXiv · cs.CL52

    arXiv 论文:让医疗设备文档评估中大语言模型的每个阶段都确定性可复现

    arXiv 论文 arXiv:2610.21300 研究如何让医疗设备法规文档评估中每个环节确定性可复现。对十四个商业模型部署重复发送同一请求,所有部署至少有一个请求结果不一致,十二个的标签发生变化;降低推理量未减少差异,注入检索段落仅对最小模型有效,同一开放权重模型是否可复现取决于服务方式。作者构建了从文本提取、OCR、分块、嵌入、索引、检索到推理全链路确定性的流水线,在血糖仪和输液泵文档上跨重跑、中断、编辑、同型号 GPU 机器和不同日期均返回字节级相同输出;OCR、嵌入与近似检索在服务方式不固定时仍有差异,输出随 GPU 型号和推理引擎调度设置变化,因此后者应记入配置。

    推荐理由:论文给出了十四个商业 LLM 部署的可复现性实测数据,并提出一套逐阶段确定性的文档评估流水线,可直接迁移到审计场景。

  10. arXiv · cs.CL52

    VALCON 论文提出双角色变化框架评测并缓解大语言模型价值一致性问题

    研究者提出 VALCON,一个通过双角色变化把价值一致性操作化的评测框架,包含 VAB-Consistency、VAB-Boundary、VAB-Challenge 三个基准套件,代码和数据已开源。对 28 个 LLM 的实验显示普遍的跨角色不一致:输出高度合规的模型常常无法让自身评判与自己的生成对齐。机制探针发现与这种行为不对称相关的角色依赖表征解耦,据此提出的表征定向干预可有效缓解一致性失败。论文被接收为 Findings of ACL: EMNLP 2026。

    推荐理由:论文把价值一致性单列为一个对齐维度,给出评测套件、机制分析和干预方法,对关注模型自我评估可靠性的读者有参考。

  11. Hugging Face Blog53

    NVIDIA 与 AI4Bharat 发布 2.8 万亿 token 印度语言预训练语料 Nemotron-pretraining-Indic-v1 及开源生成流水线

    NVIDIA 与 IIT Madras 的 AI4Bharat 推出 Nemotron-pretraining-Indic-v1,约 2.8 万亿 token 覆盖 22 种印度宪法语言,含 22 种语言本族文字数据和 12 种语言的罗马化数据,共 34 种语言-文字配置。流水线用 NeMo Data Designer 和 Gemma-4-31B-it 做文档级翻译、MQM 风格质量评估(保留 75/100 以上)与定向修复,每条记录可溯源,生成配方开源可复用;另十种语言采用 Bodhan AI 的 Indic Translate。Nemotron 3.5 Super VL 用其中 12 语言子集加 100 亿 token 做 CPT 后,五个 Indic 基准提升 4.98 至 9.82 个百分点。

    推荐理由:完整公开了 2.8 万亿 token Indic 语料的生成配方和质量门槛,团队可复用其翻译与修复流水线迁移到自己的语种。

  12. arXiv · cs.AI58

    arXiv 论文提出非线性叙事生成基准:19个模型平均更偏线性讲述

    一项 arXiv 研究发布包含83部出版作品的非线性叙事生成基准,每部作品标注正序与叙事顺序的事件列表及因果依赖、角色知识和悬念结构的故事图。测试显示19个模型按时间顺序讲述都比出版作品更线性,被要求特定结构时约一半情况落在人类范围内;自动化裁判与71位人类读者都更偏好模型默认的线性故事,非线性版本在81%的关键判断中被认为更难跟上,读者还更偏好基于故事图生成的故事而非照搬出版顺序。

    推荐理由:论文用83部作品语料和71位人类读者对比模型非线性叙事能力,给出了具体差距数据而非泛泛结论。

  13. arXiv · cs.AI52

    MetaExp 论文提出通过可验证跨任务环境扩展训练智能体自我改进能力

    论文提出 MetaExp 框架,通过带跨任务结构的可验证任务族训练语言模型智能体把交互反馈变成可迁移的经验学习能力,设计了 Shared-Tool 和 Shared-Workflow 两种任务族。团队在 1,000 个任务族上收集并过滤得到 4,956 条轨迹,微调 Qwen3.5-122B-A10B,参数冻结后在 SpreadsheetBench 提升 +8.5、APEX-Agents 峰值 +2.3、AutomationBench 提升 +14.8,领域排除训练下增益仍保持。论文地址 https://arxiv.org/abs/2610.21492v1

    推荐理由:论文用可验证跨任务环境训练经验学习能力,并在三个基准上给出领域排除训练下的迁移增益数据,可参考其环境构造思路。

  14. arXiv · cs.AI52

    QREF:通过查询改写与证据过滤提升 DeepSearch 智能体

    研究者提出 QREF,一个即插即用的查询改写器与证据过滤器,通过 SFT 初始化并用强化学习在真实网络搜索环境中优化,缓解 DeepSearch 智能体检索意图错位与噪声累积问题。方法在四个基准上平均将 WebSailor 的 Pass@1 相对提升 33.55%、TongyiDeepResearch 提升 11.04%,无需修改架构或重训推理策略;RL 训练的改写器比原始骨干减少 95% 缺乏判别性检索锚点的查询批次。论文地址 https://arxiv.org/abs/2610.21512

    推荐理由:论文给出即插即用的查询改写与证据过滤方案,不改架构即可提升 DeepSearch 智能体表现,数字与对比数据齐全。

10月15日周四
  1. arXiv · cs.AI53

    arXiv 论文提出免重训练方法让预训练 Transformer 可按算力预算弹性伸缩

    Walter Simoncini 在 arXiv 发布论文,提出免重训练方法把预训练 Transformer 变成可在连续算力预算间自适应的单一模型,核心是对功能单元排序问题做可微松弛,在统一尺度上联合排序每个 MLP 神经元和注意力头。在 22M 到 8B 参数的 27 个视觉与文本 Transformer 编码器上,方法在最高 60% 稀疏度下平滑退化并优于 one-shot 基线;DINOv3 ViT-H+/16 剪枝到 50% 稀疏度移除 427M 参数,ImageNet-1k linear-probing 精度仅降 0.8%;AugReg ViT-B/16 在 60% 稀疏度下于 A100 GPU 上吞吐提升最高 1.80 倍、单查询延迟降低 1.26 倍。

    推荐理由:论文给出免重训练的弹性剪枝方法,在27个模型上验证60%稀疏度下的精度与吞吐数据,可复现。

  2. arXiv · cs.AI58

    语言智能体协同演化行动与预测的训练方法登上 arXiv

    arXiv 论文 2610.20597 提出一种为语言智能体引入多步动作目标的训练方法,在成功轨迹上训练策略骨干生成后续动作序列,并从历史预测每个动作形成时间集成,使行动与预测协同演化。在 ALFWorld、ScienceWorld、WebShop、τ²-bench 和 AppWorld 五个基准上,该方法整体表现超过 GRPO 及带预测辅助目标的 RL 基线,在 ScienceWorld 上样本效率分别比 ECHO 和 GRPO 高 1.9 倍和 2.0 倍,且只用单一策略骨干,推理时无额外开销。代码已开源。

    推荐理由:论文给出多步动作目标的训练方法,在五个基准上对比 GRPO 等基线并报告样本效率倍数,方法可复现且代码已开放。

  3. arXiv · cs.AI56

    HiRe-MoMa:基于稀疏人工引导的移动操作真实世界微调框架

    论文提出 HiRe-MoMa 框架,用于移动操作(MoMa)系统的真实世界高效微调。其分层残差架构在冻结基础策略上学习增量修正,并将残差拆分为移动底盘与机械臂两个头以缓解梯度干扰;Expert-Guided Value Alignment 利用覆盖率不足 20% 的稀疏人工干预重塑 critic 价值函数。在 TIAGo++ 平台上的实验显示,约 30 分钟在线交互即可持续提升任务性能,且不依赖基础策略架构。论文被 CoRL 2026 接收。

    推荐理由:论文给出在真实机器人上微调移动操作系统的分层残差框架,用不到20%覆盖度的稀疏人工干预提升样本效率。

  4. arXiv · cs.CL57

    MultiPartyTurnBench:评测多方语音对话中话轮控制的基准发布

    作者发布 MultiPartyTurnBench(MPTB),包含 240 段合成、信道分离的 2 至 5 人对话和六种交互类型,评测话轮结束(EOT)检测与打断(INT)检测两项任务。基线模型 EOT 召回率达 82.5-92.6%,但五个全双工智能体在选择性打断处理上接近随机水平(46.9-54.7%),Gemini-3.8-Live 对 97.7% 的附和信号让出话轮,MiniCPM-o-4.5 仅响应 1.4% 的真实打断。论文指出选择性话轮控制仍是多方语音交互的未解难题。

    推荐理由:基准把真实话轮转换与易混淆的非事件分开评测,并给出五个全双工智能体在选择性打断上的具体短板数据。

  5. arXiv · cs.CL52

    arXiv 论文:跨模型 in-context 神经反馈揭示 LLM 对自身激活的控制能力有限

    arXiv 论文 arXiv:2610.20179 提出跨模型 in-context 神经反馈方法,测试 5 个家族共 10 个 9B 到 32B 的开放权重模型,检验语言模型能否控制自身激活。部分模型能明显移动自己的激活分数,但幅度不超过同等能力的写手模型;预填固定句子后仅 3 个模型表现出小而稳定的控制效应;在欺骗监测器实验中无模型能降低监测分数,仅 1 个模型能抬高它。作者认为这种控制能力尚不构成对激活监测器的威胁,但需随模型演进持续追踪。

    推荐理由:论文用跨模型写手和预填句子的实验设计,把任务能力与对自身激活的真实控制区分开,结论有明确证据支撑。

  6. arXiv · cs.CL56

    TreeFlex 论文提出让 Agent 自主导航搜索树的框架

    Dongzhuo Li 等人在 arXiv 发布 TreeFlex 框架,让 Agent 用单个模型以 Reflection 和 Execution 两个角色自主决定在搜索树中深化、分支、回溯或验证,摆脱单一上下文里陈旧信息挤占容量的限制。导航、任务动作、检查点与提案审核通过树感知改造的 GRPO 联合训练。4B 模型经小规模 RL 后在深度研究基准达 48.8% 准确率,高于 flat ReAct 的 41.5% 和 FoldAgent 的 42.8%,Pass@8 高出约十分;9B 模型在 SWE-bench Verified 解决 54.9% 任务,高于 FoldAgent 的 43.3%。论文链接 https://arxiv.org/abs/2610.20334v1

    推荐理由:论文给出 TreeFlex 与 ReAct、FoldAgent 在相同上下文限制和相同起点模型下的对照数据,可比较搜索树导航带来的具体提升。