跳到正文
  1. arXiv · cs.AI54

    用学习到的速度先验重定时机器人演示数据的 arXiv 论文

    Seungyong Moon 等提出从大规模演示数据中学习速度先验,根据任务指令、运动路径和沿线图像预测执行速度分布,用选定分位数定义一致的时钟来重定时各条演示。该先验在机器人遥操作和人类手持演示数据上拟合,用于在微调视觉-语言-动作(VLA)策略前将机器人演示重定时到手持节奏,并配实时最优控制层按预测节奏追踪动作块。在 120 个 RoboLab 任务上,用学到的时钟微调的策略成功率更高、jerk 最多减半;真实机器人上叠杯用时 3.50 秒,比默认策略的 6.02 秒快 1.72 倍,成功率相当(30 次试验成功 29 次)。论文:https://arxiv.org/abs/2610.32676v1

    推荐理由:提出用学到的速度先验统一重定时机器人演示数据,配合最优控制层追踪动作块,读者可关注其对 VLA 微调数据质量的处理思路。

  2. arXiv · cs.AI53

    FocusVLA:面向 VLA 模型的未来意图引导动态视图路由框架

    研究者提出 FocusVLA,一个基于阶段感知的 VLA 多视图动态路由框架,从历史动作预测未来交互意图以引导视图切换。在 RoboTwin 2.0 上平均成功率较最强基线 π0.5 提升 10.10 pp,真实世界评测成功率从 71.7% 提至 85.0%;其意图预测与动态路由模块可在不改核心架构的情况下集成到现有 VLA 框架,已被 CoRL 2026 接收。

    推荐理由:论文指出 VLA 模型普遍过度依赖腕部视角,给出的动态视图路由方法可迁移到现有 VLA 框架,改动成本较低。

  1. arXiv · cs.AI54

    REACT 框架:VLM 引导接触重定向与生成式伙伴建模用于人形机器人与人交互

    论文提出 REACT 框架,从人类双人示范中学习可部署的人形机器人交互策略,用 VLM 引导的接触建模与重定向提取语义接触,并将特权策略蒸馏为仅靠机载深度感知的部署策略。为应对严重部分可观测,引入生成式伙伴状态建模目标预测被遮挡伙伴运动;在仿真和真实 Unitree G1 上评测五项接触丰富交互,实机上仅靠机载感知完成全部五项。

    推荐理由:论文聚焦近距离接触时人形机器人看不到人类伙伴的难题,用语义接触结构作为监督信号,并给出了仿真与 Unitree G1 实机的验证。

  2. Hugging Face Blog59

    NVIDIA 发布 Cosmos3-H-Dreams 实时生成式外科手术模拟器

    NVIDIA 发布 Cosmos3-H-Dreams,把交互式生成模拟带入临床胆囊切除场景,官方称这是首个基于临床手术录像训练、支持实时运动控制的开源外科手术生成模拟器。模型基于 160 亿参数的 Cosmos3-H-Embodied-Nano,使用 CMR Surgical Versius 平台的视频与机器人运动学数据训练,采用 28 维动作、832 x 480 视频和 10 Hz 动作对齐,经 Self-Forcing 蒸馏出四步和两步去噪两个 checkpoint,并通过 FlashDreams 在单张 NVIDIA RTX PRO 6000 GPU 上交互运行。团队发布了代码、模型、数据集和完整的教师微调与蒸馏适配指南,并强调这是研究模拟器,不是经过验证的临床系统。

    推荐理由:NVIDIA 官方给出了从教师微调到 Self-Forcing 蒸馏的完整细节和四步、两步两个checkpoint,读者可以自己复现到数据集上。

  1. arXiv · cs.AI54

    arXiv 论文提出 PhysRSI-eval:观测性 scaling 定律解析 LLM 作为策略的物理 RSI 能力来源

    一篇 arXiv 技术报告系统研究物理递归自我改进(RSI)的机制、scaling 行为与泛化,提出 PhysRSI-eval,用首次尝试性能、效率、成功率、预算与失败改进五轴指标,在固定交互预算下评测多个 VLM 于 18 个操作任务。分析引出 Physical Barrel 假设,并从公开能力预测相对表现、从早期物理反馈预测后续进展两个角度做观测性 scaling 分析;工作区干预显示移除历史会降低后期成功率,而冻结工作区在未见布局上仍有效,说明场景特定适应与可复用经验可以共存。

    推荐理由:论文用五轴指标量化物理 RSI 并给出观测性 scaling 分析,能帮助读者理解 VLM 智能体自我改进能力的来源边界。

  1. arXiv · cs.AI52

    arXiv 论文提出自建实验室 SBL,可按科学目标自主搭建实验室配置

    论文 arXiv:2610.23826 提出自建实验室(SBL),给定高层次科学目标即可自主设计、配置并运行实验室设置,补建实验布局、数字孪生、机器人技能和实验流程。系统已在不同机器人和 setups 上演示,从单一工作站扩展到多机器人协作实验室,并通过真实世界量子点合成实验完成端到端验证。

    推荐理由:论文提出自建实验室概念,把人类角色从配置自动化设备转为只给科学目标,实验灵活性问题有了新解法。

  1. arXiv · cs.AI54

    CoDA 论文提出仿真数据引擎与动作策略共同进化框架

    论文提出 CoDA 框架,让仿真数据引擎与动作策略通过共享异构记忆共同进化,记忆将视觉语言评论家的诊断编译为生成程序与训练程序,并用 Text2potential 为动作块价值学习提供密集监督。在四个操作任务族上,分布外成功率从 SFT 后的 5.3% 提升到 27.6%,比最强闭环基线高 9.5 个百分点;LIBERO-Pro 上 15 轮生成与训练使位置扰动下成功率从 25% 升至 84%,指令扰动下从 1% 升至 76%。

    推荐理由:论文提出仿真数据引擎与动作策略共同进化的训练框架,并给出分布外成功率的实测对比,方法思路可迁移到机器人策略训练。

  1. arXiv · cs.AI56

    HiRe-MoMa:基于稀疏人工引导的移动操作真实世界微调框架

    论文提出 HiRe-MoMa 框架,用于移动操作(MoMa)系统的真实世界高效微调。其分层残差架构在冻结基础策略上学习增量修正,并将残差拆分为移动底盘与机械臂两个头以缓解梯度干扰;Expert-Guided Value Alignment 利用覆盖率不足 20% 的稀疏人工干预重塑 critic 价值函数。在 TIAGo++ 平台上的实验显示,约 30 分钟在线交互即可持续提升任务性能,且不依赖基础策略架构。论文被 CoRL 2026 接收。

    推荐理由:论文给出在真实机器人上微调移动操作系统的分层残差框架,用不到20%覆盖度的稀疏人工干预提升样本效率。

  1. arXiv · cs.AI56

    UniW(A)M:统一世界模型与世界动作模型的 MoE 框架

    论文提出 UniW(A)M,一个基于扩散 Transformer 的混合专家框架,统一动作条件世界建模与多种世界动作模型变体,以共享专家捕捉共同物理动态、原子能力专家跨接口复用。在 LIBERO、RoboTwin 2.0 及三个真实操作任务上,真实世界平均成功率达 88.3%,最强基线为 76.7%;WorldArena 上动作条件世界建模三项任务均领先;PAIR 路由将 OOD 成功率从 63.3% 提至 76.7%,且部署时主干冻结。论文正在 ICLR 2027 评审中,共 34 页。

    推荐理由:论文统一了世界模型与世界动作模型的训练,真实操作任务成功率比最强基线高出 11.6 个百分点,并给出 PAIR 的 OOD 数据。

  2. arXiv · cs.AI53

    Steertuning:从少量人类视频让机器人 5 分钟内学会新任务

    arXiv 论文提出 Steertuning 系统,让机器人从 5 条人类示教在 5 分钟内学会新任务。该系统先在 100 小时带密集标注的自我中心人类交互数据上预训练 400M 参数扩散策略,再对新任务仅做 2 分钟微调(2000 次更新),并在反向采样时用观测最接近部署环境的示教引导动作。在 12 个新环境的 12 项任务上达到 71% 成功率,数据、权重、代码和机器人视频将公开。

    推荐理由:原文给出了从人类视频微调机器人策略的完整方法与量化结果,读者可以据此评估少样本示教方案的可行路径。

  3. arXiv · cs.AI55

    Thinker-WM:共享多模态表示的统一世界模型用于具身智能

    Thinker Team(Ubtech)发布统一多模态世界模型 Thinker-WM,通过共享的 Unified Dynamics Transformer 联合建模并生成 RGB、度量深度和机器人动作。同一套参数化支持视频-动作联合生成、世界预测、策略推理、逆动力学等多种功能;训练数据约含 2 万小时第一视角视频、1 万小时真机数据和 1 千小时仿真数据,其中约 4 千小时真机数据带对齐深度监督。模型在 EWMBench、WorldOlympiad 和 WorldArena 上排名第一,消融实验验证了动作条件化、几何交互与多功能训练的收益。论文链接 https://arxiv.org/abs/2610.18447v1。

    推荐理由:论文把外观、几何和动作放进共享动态表示统一建模,并列出在 EWMBench 等三个评测上的具体排名与训练数据构成。

  1. arXiv · cs.AI52

    LAPT-Scale 提出用人类视频潜在动作预训练扩展具身策略,真机成功率从 63.3% 提升至 85.0%

    论文提出 LAPT-Scale,一种可扩展的潜在动作预训练范式,用人类第一视角视频为 VLA 策略提供动作监督。方法包含学习连续潜在动作的 LAPT-Scale-LAM 和经人类视频预训练、本体对齐与任务后训练的 LAPT-Scale-Policy 两部分,训练数据达 23.3K 小时;随标注人类视频从 1K 扩到 5K 小时,真机成功率从 63.3% 提升到 85.0%,并能泛化到未见视觉条件。论文已被 CoRL 2026 接收。

    推荐理由:论文给出用人类视频潜在动作预训练提升真机成功率的完整方法与数据规模细节,适合关注机器人数据瓶颈的读者参考。

已经到底了