跳到正文
10月9日周五
  1. arXiv · cs.CL49

    TokenRouter:面向 token 级 LLM 路由的高效推理服务系统

    arXiv 论文提出 TokenRouter,一个面向 token 级 LLM 路由的高效推理服务系统,已被 NeurIPS 2026 接收。系统采用“请求为中心编程、模型为中心执行”原则,为每个 LLM 启动子服务器并异步调度请求,配合基于吞吐量数学模型优化超参的 delayed-batching 调度器。在多种路由算法、工作负载和模型对上,TokenRouter 的解码吞吐量比现有系统高 2.01-64.15x,代码已开源。

  2. arXiv · cs.CL37

    NativeScope:基于原生拓扑与正确锚点的关系定位检索

    论文提出 NativeScope,一种先定范围再排序的检索方法,将查询表示为 q -> (A, r, B),利用锚点和关系(belonging、before、after 算子)选取原生单元后再对范围内文本块排序。在基于 QASPER 和 LongMemEval 构建的 200 条受控记录上、1,024-token 预算下,NativeScope 文档与记忆的原生单元召回率分别达 89.28% 和 72.50%,比全实例 Dense RAG 提升 42.75 和 22.00 个百分点;变体 NS-FullQ 达 87.78% 和 68.50%。但使用自动 Top-1 锚点时记忆召回率降至 35.50%,表明硬定范围依赖锚点定位接口的可靠性。

  3. arXiv · cs.CL39

    EgoVoice:基于第一人称多模态流的主动式语音助手框架

    研究者提出 EgoVoice,一个用于训练和评估主动式第一人称语音助手的框架,让模型从连续视频与音频流中自主决定何时开口、说什么。该工作基于 HoloAssist 视频构建音频流数据,微调全模态 LLM 并用 DPO 优化主动干预行为。实验显示现有开源与闭源模型很少产生时机恰当的主动干预,而 EgoVoice 在干预时机、内容相关性上均优于零样本基线。

  4. arXiv · cs.CL45

    HarnessSQL:在真实数据库环境中对 SQL Agent 进行 Harness 原生训练

    HarnessSQL 是一个 harness 原生的后训练框架,让 Text-to-SQL 模型在监督微调和强化学习全程保留与真实数据库的有状态多轮交互结构。在 Spider 2.0-SQLite 上,Qwen3-8B 执行准确率从 15.5% 提升至 45.2%,Qwen3-14B 从 22.2% 提升至 54.8%,并能迁移到 BIRD-Interact、LiveSQLBench 等分布外交互式基准。

  5. arXiv · cs.CL43

    Verdict Without the Rule:诊断 LLM 合规系统对监管规则的敏感度

    一项 arXiv 研究测试五个模型在 20 个监管与平台政策领域中的合规判断,发现删除、替换或否定规则后,模型结论往往基本不变。作为审查器的 guard 模型规则敏感度最低、准确率仅 51%,而通用模型为 90-92%;更好的提示词或干预内部表征都无法弥补这一差距。这表明准确性本身并不能证明合规结论真正基于所给规则。

  6. arXiv · cs.CL45

    SparseDecoding:面向准确高效 LLM 推理的解码感知剪枝框架

    SparseDecoding 是一种面向 LLM 解码阶段的剪枝框架,通过用密集模型自回归生成时(排除 prefill)收集的激活构建校准矩阵,解决自然序列与生成序列之间的分布偏移问题,并配合带 bitmask 索引的优化 N:M 稀疏矩阵-向量核。在 Llama-3.1-8B、Llama-3.3-70B、Qwen3-14B/32B 上,该方法在长文本生成基准上持续优于固定文本校准,在 A100 GPU 上实现最高 1.48x 的端到端解码加速。

  7. arXiv · cs.CL37

    VFold:对称感知的跨层 value cache 压缩方法

    arXiv 论文提出 VFold,一种对称感知的 value cache 合并策略,可在 LLM 解码时压缩 KV cache 内存,同时避免性能下降且无需修改模型架构。该方法可与高比率量化或 key cache 剪枝等现有压缩技术叠加,达到单一方法无法实现的压缩比,为内存受限下扩展上下文窗口提供了简单有效的方向。

  8. arXiv · cs.CL49

    AI 智能体能否通过启发式学习登上竞技之巅?长期运行的博弈智能体竞赛评测

    研究提出对抗性启发式学习范式 AHL,并发布包含 12 个对抗性游戏和 1,920 个人类程序存档的 AAArena 基准,让 AI 智能体在固定比赛预算内解读规则、选择对手、分析回放并改写博弈策略。评测中,Opus5.5 配合 Claude Code 获得 6 枚金牌,但没有任何被评测配置能超越其余 6 个人类阶梯;规则更复杂的游戏中表现普遍较弱。实验显示对手选择与密集反馈有助于策略改进,智能体能从自身与他人的比赛回放中学习。

  9. arXiv · cs.CL36

    突破先验壁垒:长尾分布下的监督微调

    一项研究提出“先验壁垒”概念,用以量化预训练大语言模型(LLM)对竞争概念与目标概念的支持差异,并发现其呈长尾分布。基于此,研究提出自适应 SFT 指令选择方法 PASS,在有限预算下优先覆盖监督不足的概念。实验显示 PASS 在四组 backbone-budget 设置上持续优于七种 SOTA 指令选择方法。

  10. arXiv · cs.CL41

    LLM 智能体“准确但不谦逊”:知识冲突下的认知谦逊评估

    一项 arXiv 研究提出用认知谦逊(EH)评估智能体,涵盖 Identify、Solve、Escalate(ISE)三个轨迹级行为维度,并在受控冲突与多步执行中自然冲突两种知识冲突设置下测试四个智能体。结果显示更高的任务准确率未必带来更大的认知谦逊:部分高准确率配置能在执行中识别冲突,却不在错误的最终答案中沟通未解决的不确定性;智能体常在早期步骤检测到冲突,但难以在后续步骤维持或解决。模型层面的干预可提升 EH,但往往以牺牲任务准确率为代价。

  11. arXiv · cs.CL50

    引用而未参考:对法律链式推理忠实性的反事实审计

    一项 arXiv 研究对大语言模型法律判决解释的忠实性进行反事实审计:在保持案件事实不变的情况下替换模型所引用的法律依据,从隐藏状态解码判决变化。实验覆盖 7 个开源权重模型(8B-70B)和 4 个基准,模型在 66.7%-100% 的生成中能正确命名法律依据,但判决随依据改变而翻转的比例仅为 0.0%-21.7%(CaseHOLD)、30.0%-76.7%(ECHR 和 SCOTUS)、43.3%-50.0%(ContractNLI),模型规模和 LoRA 复现的法律专用模型均未能弥合差距。红队测试显示模型对隐藏在案件事实中的对抗指令服从率达 73.3%-96.4%,远高于判决翻转敏感度,表明引用法律依据不能作为判决依赖性的可靠指标。

  12. arXiv · cs.CL46

    OnTrack:通过流式结构感知最优传输实时监控与干预 LLM Agent 轨迹

    OnTrack 是一种流式监控机制,通过对比 LLM Agent 的步骤与已记录的成功轨迹,可在每步约一毫秒内告警或阻断 Agent。在 SWE-bench 轨迹上,仅凭前 8 步其区分失败与成功轨迹的表现优于内容相似度方法(+0.057 AUROC);配合中止策略可节省约 18% 会浪费在失败运行上的算力,且 5/6 次中止判断正确。

  13. arXiv · cs.CL34

    Latent Core Tokenizer (LCT):有意义的分词器压缩

    论文提出 Latent Core Tokenizer(LCT),一种语言无关的分词方法,用 Minimum Description Length、熵边界信号和形态约束在构建共享词表前识别可复用语言单元。在覆盖 104 种语言、200K token 词表的设置下,LCT 的 fertility 低于 BPE、Unigram 和 parity-aware BPE,MorphScore 更高,并在四个多语言下游基准上分别取得 1.48、1.83、2.00 分的聚合提升。结果表明仅靠压缩无法预测表示质量。

  14. arXiv · cs.CL33

    LLM-BlockFE:LLM 引导的分块特征工程,通过可执行程序搜索将长文本转为预测特征

    研究者提出 LLM-BlockFE,一个 LLM 引导的离线特征构建框架,通过增量拼接不可变代码块并搜索可执行特征程序,将长文本转为结构化特征,避免在线推理时调用 LLM。该方法引入基于深度校准信用分配的块级回滚机制和交错多轨迹搜索。在两个公开和两个私有数据集上,AUC 较最强基线绝对提升 0.0069 至 0.0358;五个已上线的金融风控应用监测显示 KS 较现有人工策略绝对提升 0.02 至 1.56 个百分点。

  15. arXiv · cs.CL50

    SpaceCast-Bench 基准发布:评估视觉语言模型的预测性空间推理

    Hongxing Li 等在 arXiv 发布 SpaceCast-Bench,首个直接评估视觉语言模型预测性空间推理的基准,包含来自182个真实场景的3862道题、16种任务类型,分静态感知、局部预测和全局预测三层。21个模型中最强者仅达58.0%,远低于人类的87.2%,空间特化模型接近随机水平;微调使 Qwen3-VL-4B 从34.0%提升到65.7%,并在六个域外基准上有宏观平均提升。

  16. arXiv · cs.CL43

    ViSkill:用演化的视觉原生技能强化 VLM 智能体

    研究者提出视觉原生技能学习框架 ViSkill,将成功交互编码为视觉技能卡片供 VLM 智能体调用,技能检索同时引导推理与奖励塑形,成功轨迹再蒸馏回技能库,形成技能积累与策略提升互相强化的闭环。在 Sokoban、FrozenLake 和 PrimitiveSkill 上,ViSkill 整体成功率达 0.89,加入冷启动机制后升至 0.91,优于所有受测专有与开源基线,且比标准 PPO 收敛更快。代码已开源。

  17. arXiv · cs.CL39

    用价值表示预测 LLM 对齐泛化

    一项 arXiv 研究提出「对齐泛化预测」任务,即预测模型针对某一价值微调后,在大量未见价值上的行为变化。研究覆盖现代对齐目标中的 66 个价值,发现基于模型激活的表示方法显著优于基于文本描述的基线,与泛化矩阵的相关性达 0.45,后者仅 0.05。研究还提供了模型无关的共享价值空间证据,并据此构建首个基于经验泛化动力学的 LLM 价值分类法。

  18. arXiv · cs.CL52

    WOVEN:将视觉世界建模融入多模态大语言模型的训练源与基准

    arXiv 论文 2610.12417 提出 WOVEN,一个面向视觉转移推理的训练源与基准,包含 36076 条覆盖 20 种场景、5 种动作和 8 种推理类型的样本。评测 GPT-5.4 和 Qwen3-VL-235B-A22B 等 38 个前沿多模态模型发现其远低于人类水平;用 WOVEN 训练后,每个约 2000 条的子集在 26 个外部基准中的 22 个带来最高 27.3 个百分点的提升,并可替代任务自身 30-50% 的训练数据。

    推荐理由:论文用约2千条子集就在26个外部基准中改善22个,给出了按推理操作而非场景选取监督的可迁移训练配方。

  19. arXiv · cs.CL45

    FastBench:流式 VLM 能否感知高动态真实世界视频流?

    研究者推出 FastBench,用于评估流式视频大语言模型(VLM)在真实世界高动态场景下的感知能力,包含 306 个 QA 对,覆盖八个领域、六种能力及前向、即时、回溯三类时间范围,并用 SAM3 和 CoTracker3 轨迹做答案验证。实验显示最强模型 Gemini-3.5-Flash 仅得 50.7%;Qwen3-VL-8B 采样从 2 FPS 提至 24 FPS 后由 32.9% 升至 44.6%,但随历史压缩增益饱和。免训练基线 ProactiveFrame 分别比稀疏均匀采样高 5.4 和 1.5 个百分点,仍远低于 oracle 引导聚焦。

  20. arXiv · cs.AI28

    BEVPIPE:用可移植 GPU 计算部署 BEV 感知的算子失配问题

    BEV 感知模型依赖稀疏 3D 卷积与几何 scatter 操作,现有推理运行时无法表示,且稀疏卷积库均为 CUDA-only 并与 PyTorch 耦合。论文提出 BEVPIPE 框架,将模型切分为运行时管理的稠密子图和 voxelizer、sparse encoder、BEV projector 三个外部算子扩展,通过共享 GPU 内存连接。BEVPIPE 实现相比传统部署 19.5x 的端到端加速,保留 98.5% 的参考 mAP,并可跨不同 GPU 后端移植。

  21. arXiv · cs.AI12

    深度图聚类框架 CoCo 获 ICLR 2026 Oral:兼顾紧凑性与一致性

    研究者提出深度图聚类框架 CoCo,针对 GNN 局部消息传递难以捕捉全局关系、图数据冗余噪声导致表征不紧凑的问题,利用图卷积滤波器从局部和全局视图学习鲁棒表征,并编码为低秩紧凑嵌入,再通过一致性学习策略促进两视角知识迁移。实验显示 CoCo 在多个数据集上超越 SOTA 方法,论文被 ICLR 2026 接收为 Oral。

  22. arXiv · cs.AI22

    MSGAT:用于图文检索的多头脉冲图注意力与相似度空间融合方法

    研究者提出 MSGAT(多头脉冲图注意力网络)与 Sim-Fuse 相似度空间融合策略,用于基于脉冲神经网络(SNN)的图文检索(ITR),解决稀疏脉冲表示难以做跨模态对齐的问题。在 Flickr30K 和 MSCOCO 上,该方法在同等设置下优于 ANN 方法及现有 SNN 检索基线。仅用两个时间步即可达到与 ANN 对手相当或更优的性能,同时将模块级理论能耗降低 55%,代码随补充材料提供。

  23. arXiv · cs.AI17

    AtomWorld-Mirror:面向材料动力学的宏观步长世界模型

    研究者提出 AtomWorld-Mirror,一个面向原子系统关键演化骨架的时间感知宏观步长世界模型,将短微事件片段蒸馏为关键状态间物理可达的跃迁。该方法在 Cu-rich RPV 钢辐照老化、Cu-Zr 金属玻璃、Li$_3$N 基反钙钛矿固态电解质等五个原子系统上,推理速度较逐事件模拟提升 10^3 至 10^4 倍,同时保持结构有效性与时间语义。

  24. arXiv · cs.AI43

    ReTeach:通过多轮反思与重试构建自教师模型

    ReTeach 是一种反思式自蒸馏框架,仅用模型自生成的尝试和结果级验证,通过多轮反思与重试构建自教师,无需参考答案、外部诊断反馈或跨样本记忆。其结果感知的选择与加权策略区分初始正确、反思纠正和未解决样本,并通过 on-policy 蒸馏将迭代纠错收益转移给学生模型。在数学推理、科学问答和工具使用的六个 benchmark 上,ReTeach 平均准确率比 GRPO 提升 1.39 个百分点。

  25. arXiv · cs.AI38

    Design Creativity Bench:衡量 LLM 生成 UI 的创造力

    arXiv 论文提出 Design Creativity Bench,从原创性、创意范围和适当性三方面评测 LLM 生成 UI 设计的创造力。结果显示同 prompt 下不同模型设计对的原创性为 0.592,远低于人机对的 0.764;创意范围 0.581 也远低于人类设计的 0.902;但适当性均超 90%,最佳模型达 99.2%,略高于人类的 98.0%。论文指出 LLM 默认输出虽然普遍恰当,但重复性显著高于人类基线。

  26. arXiv · cs.AI22

    DRL-DCO:基于进度感知深度强化学习的 DE-CMA-ES 动态协同优化与结构模型更新方法

    澳门大学、河海大学与北航研究团队提出 DRL-DCO 算法,用基于 DDPG 的 actor-critic 智能体统一调度 DE 与 CMA-ES 的演化搜索,动态分配探索与开发资源,并联合调节种群规模、精英保留和重启机制。在训练后,策略可在无监督推理模式下仅凭前向推理运行,无需 critic 评估或权重更新。该算法在高维单目标优化基准和 IASC-ASCE 结构健康监测基准上收敛精度与鲁棒性优于最先进的自适应与混合演化算法。

  27. arXiv · cs.AI45

    E-Ledger:面向部分可观测世界理解的安全持久可演化的多智能体执行框架

    arXiv 论文提出 E-Ledger,一个用于安全持久执行的多智能体框架,包含执行前策略审查的代码审批层和记录隐藏规则与动态状态的世界账本。配套的 WorldAbduct 框架通过四个视角诊断执行轨迹、以溯因交互验证潜在规则并纳入账本。在 World of Workflows 基准上,E-Ledger 搭配 WorldAbduct 在四个 LLM 骨干上将安全任务完成率较最强基线提升 5–15 个百分点,并在 ScienceWorld 和 DiscoveryWorld 中验证了迁移效果,代码已开源。

  28. arXiv · cs.AI55

    Workerville 论文提出以组织行为学框架研究 Agent 安全并发布 3360 项挑战的基准

    Hanjun Luo 在 arXiv 发布论文,提出用组织行为学(OB)框架统一研究 LLM Agent 安全,并将反生产行为(CWB)形式化为 Agentic Counterproductive Behavior(ACB)。其 Workerville 基准用 16 种组织配置作用于 210 个任务,生成 3360 项挑战,评测 6 个前沿大模型后发现:负面组织因素组合时呈非单调放大,未授权泄露率从无负面因素的 16.5% 升至两个因素时的 60.1%,三个因素时回落到 50.3%;智能体还复现了人类 CWB 研究预测的典型行为模式。论文链接 https://arxiv.org/abs/2610.11561v1

    推荐理由:论文把组织行为学框架引入 Agent 安全研究,并用 Workerville 基准给出多配置实测数据,为理解环境因素如何影响智能体行为提供统一视角。

  29. arXiv · cs.AI17

    Sera:面向可靠且可解释电池健康预测的语义表示聚合框架

    论文提出 Sera,一个将退化语义与时间建模相结合的电池健康状态(SoH)预测框架,通过基于规则的知识和 LLM 解释构建两种互补表示,并用门控聚合与时间模型表征融合。在主流基准上,Sera 跨多个预测窗口和不同时间模型均提升预测表现,预测误差较时间基线最多降低 37.3%。反事实分析显示预测响应与关键退化描述符语义一致,支持可解释的电池健康管理。

  30. arXiv · cs.AI34

    InfiLoop:让 looped Transformer 稳定扩展到上万次测试时迭代

    论文提出 InfiLoop,一种 loop-native 残差连接,通过内容加权与学习的时间衰减维护循环状态的持续聚合,解决 looped Transformer 随迭代次数增加性能退化的问题。7M 参数的 InfiLoop 在 Sudoku-Extreme 上达到 97.9% 精确率,ARC-AGI-2 上达到 13.6% pass@2,并可在测试时循环超过 20,000 有效步仍持续提升。代码已开源。

  31. arXiv · cs.AI54

    MemoType 论文提出按记忆类型路由检索策略,提升 LLM Agent 长期记忆

    Yi Wen 等人在 arXiv:2610.11573 提出 TriMEM 记忆多分类数据集和 MemoType 框架,用路由模型自适应识别记忆与查询类型并采用相应检索策略。论文还证明单一检索策略在多类语料上存在预期检索精度的根本上界,三个数据集实验中 Recall@1 最高提升 16.18%,论文被 NeurIPS 2026 接收。

    推荐理由:论文指出统一检索策略在多类记忆上有精度上界,并给出分类数据集与路由式检索方法,可迁移到 Agent 长期记忆设计。

  32. arXiv · cs.AI38

    SDPAD:面向端到端自动驾驶的全脉冲驱动管线

    SDPAD 是一个全脉冲驱动的端到端自动驾驶规划管线,通过量化 ANN2SNN 转换、Spike-3D-Lift 和 Spike-QFormer 将预训练 ANN 感知栈转为整数脉冲形式。在 nuScenes 开环基准上,SDPAD 平均 L2 误差为 0.40m,碰撞率 0.12%,能耗仅 69.9mJ,不到近期 ANN 基线的 2%;在 NAVSIM navtest 闭环评测中达 86.3 PDMS,超过此前 SNN 规划器 SAD 4.3 分。作者称其为首个在端到端自动驾驶中评测的全脉冲驱动规划器。

  33. arXiv · cs.AI42

    面向 Coding Agent 的可运行提交解耦研究:RucTangle 与 TangleEval

    论文提出 RucTangle,首个在解耦提交的同时保证每次提交后代码可运行的 agentic 方法,并推出首个量化提交历史对 coding agent 修 bug 帮助的评测框架 TangleEval。在 131 个 agent 生成的补丁上,RucTangle 的提交历史全部可运行,而四种基线方法产生 20.6%-37.4% 不可运行历史。用其提交历史增强 agent 上下文,可将两个 coding agent 修复回归的 pass@1 绝对提升 5.2%。

  34. arXiv · cs.AI46

    EMFA:LLM 多智能体系统的错误传播建模与失败归因方法

    arXiv 论文提出 EMFA 方法,用于 LLM 多智能体系统的失败归因,通过建模级联传播与持续交互循环,定位可恢复失败执行的“决定性错误”agent-step 对。在 Who&When 基准上,EMFA 达到 SOTA 的 step-level 归因准确率,在 Hand-Crafted 与 Algorithm-Generated 子集上分别将此前最佳 step-level 结果提升 3.45 和 4.40 个百分点。

  35. arXiv · cs.AI52

    NanoProof 论文提出端到端可复现的 Lean 4 自动定理证明器

    Matěj Kripner 发布 NanoProof,据作者所知是首个训练数据、提取工具、训练管线和权重全部开源的因子化执行引导式 Lean 4 定理证明器。该方法在 MiniF2F-Test 上取得 50.8% pass@16,算力约为 HyperTree Proof Search 的 1/90、ABEL 的 1/7,比 AlphaProof 少四个数量级以上;论文同时发布了结构化证明树数据集和 Lean 4 程序化交互与数据提取工具。原文链接 https://arxiv.org/abs/2610.11605v1。

    推荐理由:论文公开了训练数据、提取工具、训练管线和权重,读者可以低成本复现这一类 Lean 4 定理证明器并对比算力开销。

  36. arXiv · cs.AI34

    CAMEO:超越报告模仿的临床感知多图像超声报告生成

    论文提出 CAMEO,一个临床感知、证据锚定的多图像超声报告生成框架,分三阶段学习视觉语言原语、跨视图证据锚定与临床感知偏好对齐。团队基于 USReport 构建 17,670 条配对图像训练数据和 21,869 条偏好对,并使用 25,631 条 PubMedVision-US 样本做领域适配。在 USReport-Distilled 基准上,CAMEO 将 BLEU-1 从 0.25 提升至 0.40、ROUGE-1 从 0.28 提升至 0.45、METEOR 从 0.27 提升至 0.43,ClinicalScore 从 55.02 升至 74.20,已被 BMVC 2026 接收。

  37. arXiv · cs.AI54

    AgentEvolver 论文提出任务执行中的系统级自进化方法

    论文提出 AgentEvolver,一个在基础模型保持固定的情况下,通过任务执行发展可复用能力的系统,八类实体经统一版本化生命周期接受修订。团队报告在 SWE-bench Pro Public 上取得 82.08% 解决率,超过其报告的无进化基线;六个应用案例显示能力保留到后续网站、游戏和研究任务,同时也记录了未完成目标和不成功策略。

    推荐理由:论文在固定基础模型的前提下把任务经验转为可复用组件,并如实记录未完成目标,便于读者评估自我进化系统的真实边界。

  38. arXiv · cs.AI18

    TAM:面向高效时空预测的任务感知记忆蒸馏框架

    TAM(Task-Aware Memory Distillation)将冻结 teacher 的知识组织为有界、可检索的历史记忆,通过匹配相似度分布或回归残差原型来补充常规知识蒸馏,且不增加 student 推理成本。在视频预测、天气预报和交通流预测的评测中,四组配对实验平均后,TAM 在全部六个视频数据集上提升 SSIM、五个数据集上降低 MSE,KittiCaltech 上 MSE 平均降低 1.86%,WeatherBench(gSTA teacher)降低 1.93%,TaxiBJ 降低 1.01%。

  39. arXiv · cs.AI29

    用于时序模式识别与机器人动态手臂手势速度估计的神经网络研究

    研究者对十八种神经网络架构在十个时序任务上进行了系统基准测试,涵盖超过 250 种实验配置,发现 BiGRU、TCN、Conv1D 和 GRUReLU 四种架构表现最稳定,且参数量低于 2,000,适合实时部署。三种最优模型被应用于从 OpenPose 骨骼关键点序列估计动态手臂手势的执行速度,数据集包含 8 类交通手势共 256,710 帧。最佳配置在峰值计数解释上平均绝对误差为 0.198,约 5% 相对误差。