跳到正文
10月23日周五
  1. arXiv · cs.AI28

    SemGeo-Gen:无监督生成跨实例近似语义-几何对应关系

    SemGeo-Gen 是一种无监督方法,从弱对齐的 3D 物体集合中自动生成近似的跨实例语义-几何监督,无需人工标注即可产出 3D-3D、3D-2D 和 2D-2D 对应关系。该方法将多视角 DINOv2 特征提升至 3D 并用连续分段仿射配准对齐实例,在 KeypointNet 稀疏人工标注上达到 93% PCK@0.10 和 97% PCK@0.15。用其合成预训练可使 SPair-71k 上的语义对应模型在微调后最多提升 5 PCK@0.10 点。

  2. arXiv · cs.AI24

    WiMoT:基于矩传输的无回放持续 Wi-Fi 感知方法

    论文提出 WiMoT(Wi-Fi Moment Transport),通过存储各旧域类别的特征均值与协方差并对统计量做仿射变换传输,替代依赖样本回放的持续 Wi-Fi 感知。在 3DO、WiMANS、Widar3.0 上平均最终准确率分别为 94.02%、89.61%、95.16%,遗忘最多 0.58 pp,在 3DO 与 Widar3.0 上领先 21 个回放基线中最强者 3.77 和 13.11 pp。将协方差存储为 rank-32 因子可把矩内存压缩至 6.4%,精度损失最多 0.49 pp。

  3. arXiv · cs.AI28

    AI 智能体能帮到机器人工程师吗:来自工业界两次 Focus Day 的案例研究

    一项针对一家工业机器人编程中小企业的案例研究发现,AI 智能体基本没有提升工程师生产力,唯一例外是生成高度重复代码的任务。但随着工程师学会使用智能体、智能体被适配到领域,效果逐步改善,且使用智能体的成败更取决于 AI 经验而非机器人工程经验。研究表明 AI 智能体并非即插即用方案,企业需培训工程师、预留学习曲线时间,且生产力研究应采用纵向设计。

  4. arXiv · cs.AI59

    IGG:面向可见性约束的交互式 GUI Grounding 基准

    研究者推出 IGG 基准,要求智能体先通过交互使目标可见再点击,含 16 个 GUI 环境、601 个任务和七类可见性约束。人类准确率 94.6%,GPT-5.5 为 79.4%,最强开源 VLM 仅 31.6%;干预实验显示为 Qwen3-VL 代做交互可将其准确率从 30.8% 提升至 81.9%,瓶颈在于执行揭示交互而非识别目标。论文已被 EMNLP 2026 主会接收。

    推荐理由:论文用两组干预实验定位出瓶颈在执行揭示交互而非目标识别,方法可迁移到 GUI 智能体的评测设计。

  5. arXiv · cs.AI28

    何时停止惩罚动作?MART-GRPO:面向 VLA 强化学习的鞅 GRPO 方法

    论文提出 MART-GRPO,用 VLM(LoRA 微调)在 OpenVLA-OFT 的 rollout 中定位最后一次可见错误,对 GRPO 的失败反馈做事件引导截断,避免有价值的恢复动作被一并惩罚。该截断在理想停止点保持参考 GRPO 梯度估计的期望并可降低协方差。在 RoboTwin 2.0 上的实验显示,MART-GRPO 在多个任务上成功率超过全轨迹 GRPO。

  6. arXiv · cs.AI55

    多模态智能体论文提出非平稳响应下科学仪器的自适应控制框架

    arXiv 论文 2610.32370 提出一个物理可控的多模态智能体,用于非平稳响应下科学仪器的逐shot调参,包含符号物理量提取、两层记忆加 MLLM 生成动作、独立动作可行性检查三个可审计组件。在 EXL-50U 四个平台的 455 shots 按时间顺序回放中,物理符号比波形图像的 macro-F1 高 0.21-0.32,检索上下文使与历史动作方向的一致率提升 22.4-42.7 个百分点;在五个离子源的监督运行中,409 次 executed shots 的束提取率达 86.80%。

    推荐理由:论文用可审计的多模态智能体在真实聚变装置上做仪器调参,给出了消融数据和监督运行成功率,方法可迁移到类似非平稳控制场景。

  7. arXiv · cs.AI19

    FOCUS:基于 Mamba-2 的轻量级 EEG 认知负荷分类模型

    FOCUS(Frequency-band Optimized Cognitive-load Ultralight SSM)是一个基于 Mamba-2 的紧凑模型,用于 EEG 二分类认知负荷,采用固定 FFT 分解编码五个经典 EEG 频段,仅 0.04 million 参数、0.11 GFLOPs。在 11 名参与者、leave-one-subject-out 交叉验证的试点研究中,模型在全数据集上达到 74.75% 准确率,GPU 前向延迟 0.08 ms。权重共享配置比非共享版本高 4.55 个百分点,但差异未达统计显著性(p=0.083)。

  8. arXiv · cs.AI33

    ChoreoStudio:音乐驱动群舞编舞中的“编什么、何时变、谁来动”规划

    ChoreoStudio 是一个音乐驱动群舞生成框架,将编舞规划显式化:音乐解耦器提取帧级节奏与段级结构特征,冻结的 omni-modal 模型充当编剧生成全局语义描述,Director 则输出队形选择、切换时机与舞者分配三项耦合决策。在 AIOZ-GDance 上,ChoreoStudio 在动作质量、群组组织与队形动态方面达到 SOTA。

  9. GitHub · 灵魂体仓库59

    AI-World 开源:十个智能体在本地 3D 世界里用真实神经网络自主生活与学习

    andrewsavio 在 GitHub 开源 AI-World,一个低多边形 3D 世界中十个有需求、性格和偏好的智能体以量子计算为目标自主学习和生活。每个智能体带两个 PyTorch 网络,技能脑用 mini-batch SGD 训练,决策脑用 REINFORCE 策略梯度强化学习,不含任何语言模型;全部在本地运行,无云端、无 API 密钥、无遥测,附 pytest 测试套件与 GitHub Actions CI。

    推荐理由:十个自主智能体在本地低多边形世界里用真实 PyTorch 网络学习与决策,全程无语言模型,架构与训练方法都写得清楚。

  10. GitHub · 灵魂体仓库69

    Groundhog 开源:通过真实隐身 Chrome 为 AI Agent 提供可信网页阅读的 MCP 服务器

    dmytrome 发布开源项目 Groundhog(MIT 协议),一个 MCP 服务器,让 AI Agent 通过带隐身补丁的真实 Chrome 进行网页搜索、读取和研究,返回干净的 Markdown。核心特性包括默认剥离并报告人类不可见的隐藏文本、每个来源附带 SHA-256 溯源回执、内置 SSRF 防护和域名限速、免模型和 API key。在 28 页隐藏文本基准上,Groundhog 25/28 完全拦截并报告,优于 requests(25/28 但不报告)、Scrapling(16/28)、Jina Reader(15/28)、Firecrawl(7/28);stealth 容器在 sannysoft.com 31/31 项通过。

    推荐理由:项目给出了对 requests、Scrapling、Jina Reader、Firecrawl 的隐藏文本检测对比数据与反爬检测实测结果,读者可据此评估这套带溯源的 MCP 阅读方案。

  11. arXiv · cs.AI29

    Part-DINO:用图像结构补充 DINO 特征以实现部件发现

    Part-DINO 是一个免训练部件发现框架,将低层图像分割得到的边界与 DINO 的语义特征结合,先按边界划分图像区域、池化区域内 DINO 特征再聚类发现部件。论文指出 DINO 特征因 ViT 刚性 patch 网格导致跨边界 patch 熵更高、分配置信度更低,边界模糊。在 CUB、CelebA、PartImageNet-OOD、PartImageNet-Seg 四个基准上,Part-DINO 超越免训练基线,并与弱监督、无监督方法保持竞争力。

  12. arXiv · cs.CL32

    SyncPro:面向主动式流视频理解的推理与响应同步框架

    研究者提出 SyncPro,一个同步双流框架,用 Inner 与 Response 两条分支分别负责证据跟踪和面向用户的响应,两条分支共享因果历史且可独立激活,使响应能与进行中的推理并行。该框架通过 189K 双流样本进行监督微调和轨迹级强化学习训练,在三个主动式 benchmark 上提升了响应时机和回答准确率。

  13. arXiv · cs.AI53

    FocusVLA:面向 VLA 模型的未来意图引导动态视图路由框架

    研究者提出 FocusVLA,一个基于阶段感知的 VLA 多视图动态路由框架,从历史动作预测未来交互意图以引导视图切换。在 RoboTwin 2.0 上平均成功率较最强基线 π0.5 提升 10.10 pp,真实世界评测成功率从 71.7% 提至 85.0%;其意图预测与动态路由模块可在不改核心架构的情况下集成到现有 VLA 框架,已被 CoRL 2026 接收。

    推荐理由:论文指出 VLA 模型普遍过度依赖腕部视角,给出的动态视图路由方法可迁移到现有 VLA 框架,改动成本较低。

  14. arXiv · cs.AI34

    PhysTrace:视频生成模型物理一致性的可解释时序评估框架

    研究者提出 PhysTrace,一个无需训练的框架,将 MLLM 生成的历史条件预期与观测视频窗口对齐,以时序定位视频生成模型中的物理违规并给出可解释描述。配套发布的 IntPhys2-Timing 基准为 IntPhys2 加入违规时间区间,PhysTrace 在其上的 Hit Rate 最高达 70.7%,并在 IntPhys2 的可能-不可能判别总准确率上优于对比方法。应用于 diffusion/flow 视频模型的重建视频时,该框架可跨时间步揭示属性与噪声相关的物理违规定位模式。

  15. arXiv · cs.AI36

    MoG-VLM:基于运动引导视觉语言模型的高效视频异常检测

    MoG-VLM 是一个运动自适应视频异常检测框架,用时间梯度幅度(TGM)做内容感知采样,仅在异常可能性升高的帧附近触发 VLM 推理。该方法在 XD-Violence、UCF-Crime、MSAD 和 ShanghaiTech 四个基准上分别取得 91.91%、84.30%、87.88% 和 78.96% 的 AUC-ROC,其中三个基准在 zero-shot、免训练设置下刷新 SOTA。在 XD-Violence 上较此前最佳提升 +0.57%,同时推理提速 1.31x,代码已在 GitHub 开源。

  16. arXiv · cs.AI41

    DuoCook:一个受 Overcooked 启发的视觉规划与协调 benchmark

    研究者推出 DuoCook,一个基于 Unreal Engine、受 Overcooked 启发的视觉规划与协调评测 benchmark,由单一视觉语言模型通过俯视视觉观察同时控制两名玩家。benchmark 包含 5 类共 20 张地图,评估任务得分、订单完成率、交付精度、动作接受率和 API 花费,并对共享自写笔记记忆做了消融实验。表现最强的模型 gpt-6-astra 平均订单完成率仅为 26.2%;笔记记忆对 Claude 和 Qwen 平均加分,对 GPT 和 Gemini 则为负向。

  17. GitHub · 3D 生成新仓库48

    bengreff/polytopia-ai:玩《The Battle of Polytopia》的神经网络开源项目

    GitHub 上一个非官方研究项目,训练神经网络在世锦赛赛制(1v1、Might、Lakes、小地图)下玩《The Battle of Polytopia》。模型先学习人类锦标赛对局,再通过逐代自我对弈提升,网站自动更新每代对战游戏最难 bot Crazy、上一代和第 0 代的战绩与对局回放。

  18. arXiv · cs.CL18

    PRISM:通过步骤序列推理识别程序性视频中的错误操作

    研究者提出 PRISM(Procedural mistake Recognition via Interpretable Semantic Modeling),用于程序性视频的操作错误识别:它将视频片段与语言对齐,并用在正确执行样本上训练的轻量级隐马尔可夫模型映射到程序状态,通过参考对齐和语义检查发现步骤内容与顺序错误。该方法将数据集标注统一映射为插入、删除、替换、移位四类错误,在三个 benchmark 上验证,语义角色标注在全部六组匹配的 grounded 对比中提升了 Any-F1。

  19. arXiv · cs.AI44

    通过反事实干预测量驾驶视觉-语言-动作(VLA)模型的推理与行为耦合度

    一项arXiv研究通过因果反事实干预,对四个驾驶VLA模型在不同benchmark上的可解释性进行检验。扰动模型自身推理文本仅引起较小轨迹变化,其影响远小于清空摄像头输入;移除推理中提及的关键物体后,推理与轨迹对场景变化跟踪也不一致。结果表明这些模型给出的驾驶解释与实际行为仅弱耦合,暴露了其可解释性的局限。

  20. arXiv · cs.AI31

    LAST-V2X:基于大语言模型自适应场景合成的 V2X 通信故障安全测试框架

    LAST-V2X 是一个由大语言模型(LLM)驱动的 V2X 应用自动化场景合成与安全测试框架,可将自然语言测试描述转译为可执行场景。框架结合交通仿真、通信语义建模与消息级故障注入,通过降级信息与真实信息的匹配执行来判定安全失效是否由通信引起,并利用参数搜索与 LLM 自反思的执行引导优化生成最小可复现失败案例。在多种 CARLA 环境和 V2X 安全应用上的实验表明,该框架能生成可靠场景、区分通信致因失效并显著提升失败发现能力。

  21. arXiv · cs.AI31

    机器人系统多工具选择研究:语义检索与大语言模型路由策略对比

    一项arXiv研究对比了机器人工具路由的四种策略:三种基于ChromaDB的语义检索方法(固定阈值、相对距离、子句感知聚合检索)与一个云端托管的1200亿参数LLM基线。在164条人工标注提示词上,检索方法CDB-v3取得最佳macro-average分数0.7822,LLM基线为0.8869。研究显示大模型路由质量更高,但CDB-v3延迟更低且可本地部署,适合隐私敏感和连接受限的机器人系统。

  22. arXiv · cs.AI45

    Dual Exam:多模态智能体与世界模型的受控评测

    arXiv 论文提出 Dual Exam 评测框架,在物理、数字、社会和科学领域分别固定环境响应测试多模态智能体、固定动作干预测试世界模型。Agent 赛道含 1,088 项、15 类报告维度的 10 种配置,GPT 6 Astra 以 31.3 的 Agent Index 居首;World Model 赛道含 400 个案例、8 个场景,GPT-Image-2 以 21.7 的全覆盖总分领先。150 个案例的耦合试点任务成功为零,揭示了任务表现不均与任务相关状态保持失败的问题。

  23. arXiv · cs.AI48

    ProductWebBench:超越任务完成度的网站连续性评测基准

    论文提出 ProductWebBench 基准,在真实前端仓库上同时评分需求完成与网站连续性,包含 320 个 Change 任务和 80 个 Build 任务。基于 13 个模型共 8,737 次运行,通过全部需求检查的 Change 运行中仍有 28.2% 未通过连续性检查,18.3% 破坏了已验证状态。此外,静态 DOM 通过的运行中有 29.5% 在交互环节失败。

  24. GitHub · 去对齐工具与仓库35

    RoboFang v1.8.0(Beta)发布:连接 AI 智能体与物理世界的安全中枢

    RoboFang v1.8.0(Beta)发布,对物理集成与安全架构作出重大调整。该工具是连接 AI 智能体(MCP 服务器)与物理世界的本地优先安全中枢,可控制智能家居设备、专业软件工具和机器人硬件,强调隐私、本地执行与安全,稳定版发布前将快速迭代。

  25. GitHub · 灵魂体仓库37

    neural-heist:训练 AI 队友的浏览器潜行动作游戏(IIT Patna capstone 项目)

    GitHub 上的 neural-heist 是一款浏览器潜行动作游戏,玩家在实验室中训练自己的 AI 队友并用于任务,共含 3 个任务,涵盖 k-NN 图像分类、Q-learning 强化学习与 RAG 邮件检索。任务 3 可选接本地 LLM(通过 Ollama 运行 qwen2:7b),未部署 LLM Worker 时助手会离线对检索到的邮件推理。项目状态为完成,含 56 个单元测试和 66 项浏览器检查,推送到 main 分支会自动发布到 GitHub Pages。

  26. GitHub · 去对齐工具与仓库42

    Electron Stagewright:让 Claude Code 等 Agent 测试真实 Electron 应用的 MCP 服务器

    Electron Stagewright 是一个 MCP 服务器,可让 Claude Code、Codex、Cursor、Cline、Aider 等 MCP 兼容 Agent 操作真实 Electron 应用,通过 accessibility tree 检查、稳定 ref 交互和带重试的 expect 断言返回有界证据。它针对 Electron 的主进程、原生菜单、多窗口和签名打包产物提供一等支持,快照文本编码可减少 5-10x token 消耗,当前版本为 @electron-stagewright/core@0.6.3,需 Node.js 24 及以上。

  27. GitHub · 灵魂体仓库19

    GitHub 灵魂体仓库 sepahead:基于 NCP 协议的四程序本地实验组合

    sepahead 仓库展示了一套以 NCP 协议为共享消息契约的本地四程序组合:Engram 运行 NEST 神经网络,CREBAIN 提供独立 3D 环境与传感器融合,Prisoma 记录实验与证据,Galadriel 做传感器篡改检测。各程序通过私有进程通道交换有界请求,其中 Engram 源码在私有 Paper2Brain 仓库,公开仓库仅为占位;本地 SDK 已发布 1.0.0,Haldir 则在 NCP wire 1.0 候选版外发布经签名验证的授权命令。

  28. GitHub · 灵魂体仓库59

    SurfBench 基准发布:用 50 个真实任务评测各网页访问 API

    riccardogiorato 发布 SurfBench 基准,用 50 个真实任务(分 4 个层级)统一评测 parallel、exa、tavily、firecrawl、keenable、linkup 等网页访问 API,检查各服务商能否找到并抓取正确页面。评分按质量 0.50、可靠性 0.35、速度 0.15 加权,使用固定的 MiniMax M3 读取模型和 Kimi K3 + GLM-5.3 评审面板,给出 95% 置信区间与每千个通过任务的成本列,完整结果包、任务检查器与方法论页面随仓库公开,MIT 协议,可自行运行复现。

    推荐理由:这是一个可直接复现的网页访问 API 评测基准,方法论、提示词与评分细则全部公开,还给出了置信区间与成本列。

10月22日周四
  1. GitHub · 3D 生成新仓库13

    HUMAN-TCI/PedMotion 项目网站上线 GitHub Pages

    GitHub 上线的 HUMAN-TCI/PedMotion 静态项目网站,展示 8 个骨架动画 GIF 和 7 个 SMPL 动画 GIF,支持移动端浏览、分类筛选、动作搜索和方法概览。部署无需 npm、Python 或构建流程,直接将文件上传至仓库并通过 Settings → Pages 发布即可。网站暂未包含开源许可证, roadside-pickup 的 SMPL 动画素材缺失,需手动补充。

  2. GitHub · 去对齐工具与仓库52

    Wvdstoep 开源 ghost-browser:让 Codex 和 Claude Code 通过 MCP 操控真实 Chromium 浏览器

    Wvdstoep 在 GitHub 发布 ghost-browser,通过 MCP 让 Codex、Claude Code 等客户端连接真实 Chromium,并用 Set-of-Mark 编号标注替代 CSS 选择器来驱动点击、输入和读取。项目内置 HTTP API、会话隔离与 SSRF 防护,附带四层自主安全侦察与漏洞审计引擎,覆盖 DNS、TLS、XSS、BOLA/IDOR、SQLi 等检测并生成 curl PoC 与补丁。AI 导航循环、recipe 编译器和计费尚未构建,仓库地址为 https://github.com/Wvdstoep/ghost-browser。

  3. GitHub · 3D 生成新仓库23

    PirateEra 开源 mpi-thesis:基于 SemTalk 架构的语音驱动动作生成论文项目

    GitHub 仓库 PirateEra/mpi-thesis 开源了一套基于 SemTalk 架构的动作生成训练项目,包含两阶段训练流程、SMPL-H 与 SMPL-X 身体模型支持,以及 LMDB 数据处理、Gradio 可视化和评估脚本。项目使用 uv 管理环境,通过 JSON 配置文件控制数据切分参数(如 pose_fps、pose_length、max_gb)与 VAE 训练参数(如 codebook 大小、learning rate、loss 权重),并提供 MPI 集群的运行说明。

  4. arXiv · cs.AI45

    ToM2Vec:用于多智能体协作的连续心智理论 token

    研究者提出 ToM2Vec,通过固定预算的连续推理 token 让 LLM 智能体在潜在空间中形成抽象心智理论。在 Overcooked-AI、Hanabi、多方谈判等合作、竞争与混合动机环境中,其表现持续优于基线模型,且能泛化到训练时未见过的模型家族(包括 GPT-5.4)。分析显示潜在 token 编码的是心智理论而非任务特定信息,且以文本表达推理时性能会下降。

  5. arXiv · cs.AI30

    FaultGene:LLM 辅助的故障增强测试生成,用于自动驾驶系统硬件在环(HIL)验证

    FaultGene 是一个 LLM 辅助框架,可自动生成可执行的故障增强测试,用于自动驾驶系统的硬件在环(HIL)故障韧性验证。它基于给定的 Scenic/CARLA 基线场景和结构化故障规范生成测试用例,并通过语义一致性检查和执行反馈进行离线微调。部署后无需人工构造参考执行或反复迭代即可直接生成测试。

  6. arXiv · cs.AI44

    SP-HLM:稀疏位姿驱动的人形机器人移动操作运动生成与全身控制框架

    研究者提出 SP-HLM 框架,用稀疏位姿接口连接高层任务策略与人形机器人全身控制。其中 SP-VLA 模型基于多模态观测和语言指令异步推理预测任务关键稀疏位姿与手指关节位置,SP-MGM 经两阶段蒸馏实时重建全身协调运动,SP-GMT 融合显式目标与隐式运动先验完成全身控制。仿真和真机实验显示其在运动跟踪、全身协调与移动操作成功率上优于现有方法。

  7. arXiv · cs.AI51

    arXiv 论文在 LIBERO-10 上评测六个前沿 AI 模型的机器人操作能力

    May Espinola 与 Qifan Zhang 在 arXiv:2610.30051 提出统一闭环评测框架,在不做任务微调的情况下测试六个前沿模型对 LIBERO-10 机器人操作任务的能力,共 18 种配置、1800 次评估。GPT-6 Astra 以 44% 成功率居首,Gemini-4 Argon 为 43%;提高推理程度普遍有助表现但增加推理成本,模型在物体放置任务上较好,在精确空间排布和复杂多步交互上较弱。

  8. arXiv · cs.AI43

    AtomicRL:面向长时序机器人操作的原子化强化学习框架

    AtomicRL 是一个面向 VLA 模型的 RL 后训练框架,通过原子任务结构实现可靠的 credit assignment 与自适应探索。其引入 Semantic-Aware Policy Optimization(SAPO)和 Bottleneck-Adaptive Target Exploration(BATE),并配套 Real2Sim2Real 流水线。在 LIBERO-LONG 上较 PPO 提升 3.6% 和 4.0%,CALVIN ABC-D 上最高提升 9.5%,真实任务平均提升 21.3%。

  9. arXiv · cs.AI43

    ASTEROID:非对称在线策略蒸馏学会上下文内探索

    研究者提出 ASTEROID,一种学生—教师监督学习框架,通过在学生在线策略采集的历史上下文上蒸馏特权专家动作,让部分可观测下的学生学会测试时探索。在 11 个环境(离散探索基准、机械臂操作、导航、Procgen 等)中,ASTEROID 在固定探索预算下回报约提高 2x,交互次数比 RL 基线少约 100x,并在视觉受限的真实机器人操作上比标准蒸馏成功率提升 +40%。

  10. arXiv · cs.AI34

    多模态具身智能体综述:从 computer-use 到 robot-use 的统一能力视角 PAPAV

    一篇 arXiv 论文提出多模态具身智能体(MMEAs)概念及统一能力框架 PAPAV,涵盖感知、预判、规划、执行、验证五项能力,用于对比多模态智能体与机器人系统从 computer-use 到 robot-use 的差异。分析 64 个 benchmark 发现,显式评估集中在 Act,仅 5 个评估 Anticipate、3 个评估 Verify;文中还梳理了从部分可观测到结果不可验证等五项物理约束带来的开放挑战。