跳到正文
#具身智能
10月25日周日
  1. GitHub · 灵魂体仓库26

    SwarmLLM-Bench：大语言模型驱动的多智能体协同控制仿真平台开源

    开源仿真平台 SwarmLLM-Bench 将 LLM 集成到 OODA 循环中，用于实时无人机蜂群协同控制。平台采用 FSM + LLM 混合架构和四层安全护栏防止幻觉，基于 Gymnasium 模拟空气动力学、电量与通信延迟。在对抗场景中，相比纯 FSM 基线，任务成功率从 0% 提升至 88%，无人机存活率达 97%，OODA 循环频次提升 27 倍。

  2. GitHub · 去对齐工具与仓库62

    a11y-computer-use 0.4.3 发布：让 AI Agent 点击真实 UI 元素而非猜测像素

    Perception Dynamics 开源 a11y-computer-use，让 AI Agent 读取剪枝后的无障碍树并按 ref 点击真实 UI 元素，而非依赖截图坐标猜测，经单一 MCP server 支持 macOS、Windows、Linux 与 Chromium。0.4.3 在 macOS 26 上捕获速度提升 100 倍，0.4.2 关闭首批三个由 Agent 提交的 issue 并加入 user_active 与真实 macOS 弹窗请求授权机制。基准对照中 refs 方式 13/13 完成且 0 误点花费 $7.04，截图坐标 7/13 完成且 27 次误点花费 $11.74；Windows 端 ref 重解析与坐标输入尚未实现。Apache-2.0 协议。

    推荐理由：同一规划器下与截图坐标方案的 13 任务对照数据齐全，含成本、误点和完成数，可据此评估无障碍树方案的取舍。

  3. GitHub · 灵魂体仓库70

    Husk 0.2.0 开源：给 AI 聊天配一台可用的计算机

    Husk 项目发布 husk-0.2.0.mcpb 公共预览，为 Claude Desktop 等 AI 聊天提供带终端、文件和浏览器的命名本地工作区，结果可保存并在下次会话复用。工具含 8 个工作区工具加 26 个计算机工具，浏览器以 accessibility ref 驱动真实 Chromium，支持 docker、podman、ssh、fly、local 五种隔离提供者并明确说明各档隔离强度；还支持把 Claude Code、ChatGPT、Cursor 等会话记录经 distill 转成可运行的 YAML Agent 规格，不请求 API 密钥、无遥测，Apache-2.0 协议。

    推荐理由：README 详细写明了隔离提供者分级、安全模型边界和已知限制，读者可据此判断这条 Agent 计算机工具链的实际可用性。

  5. GitHub · 灵魂体仓库16

    Print Buddy：在 Discord 上准备并管理 3D 打印的开源工具

    开源项目 Print Buddy 2.1.0 支持通过 Discord 准备和管理 3D 打印，分享 MakerWorld 或 Printables 链接或上传 STL/3MF 文件，在明确确认后才能开始打印。它内置 Flashforge AD5X 和 Sovol SV06 配置文件及通用 Klipper/Moonraker 适配器，使用 OrcaSlicer 切片，Bambu Lab A1 和 P1S 仅支持离线切片。运行于 Raspberry Pi 4/5 或 64 位 Debian/Ubuntu，可选集成 Spoolman、摄像头监控和延时摄影。

  6. GitHub · 灵魂体仓库25

    HZ.exe 1.0.0：把三个 Python/tkinter 小工具重构为单文件、零依赖的 Windows 托盘工具箱

    GitHub 灵魂体仓库将定时休眠、定时关闭应用、游戏加速三个 Python/tkinter 工具重构为原生 Windows 程序 HZ.exe 1.0.0，基于 .NET Framework 4.8，单文件 58.5 KB、零运行时依赖、托盘常驻。程序支持 --tab 等启动参数、Ctrl+1..4 切页、绝对时间戳倒计时避免睡眠唤醒后漂移。仓库另含 2048 AI 引擎，单核 13–18M 节点/s，18 局均分 231,928，16384 率 39%。

  7. arXiv · cs.AI36

    WebViSE：从开放网络提取视觉设计技能以增强 LLM 网页生成

    研究者提出 WebViSE 框架，自动将成熟网站实现抽象为可复用的 Visual Skills，并以多父 DAG 组织技能库。基于 Qwen3.8-Max 的自动演化结构在仅约 39.09% 检索成本下超越非层次化 LLM 检索基线。该框架可作为即插即用指导提升多种模型的网页视觉质量，并可为开源模型构建数据合成管线，相关技能库与代码已开源。

  8. GitHub · 3D 生成新仓库47

    Kino-Studios 开源 CINE：让无人机像摄影师一样运镜的规划系统

    D. Kosukhin 开源了 CINE，一个建立在 EGO-Planner 之上的电影感无人机航拍规划系统，可将避障路径重塑为符合三分构图、保持设定距离、避开强光并平滑减速的运镜轨迹。基于 B-spline 轨迹生成和模型感知，在 15 次仿真中，拍摄时峰值速度从 3.0 m/s 降到 1.2 m/s，焦点距离保持时间从 23.6% 提升到 76.4%；漂移校正神经网络使 RMS 位置误差从 0.25 m 降至 0.05 m。目前仅支持仿真运行，真机自主飞行尚未完成，论文摘要已被 AIAA SciTech 2027 接收。

  9. GitHub · 3D 生成新仓库56

    开源 Chrome 扩展 AI Batch Studio 发布，批量自动化 ChatGPT 与 Google Flow 生成任务

    开发者 AssemDeghady 开源了 AI Batch Studio，一个 Manifest V3 客户端 Chrome 扩展，用于在 ChatGPT 和 Google Flow 网页内批量执行提示词、管理参考图并自动下载媒体。项目无需 API key，直接复用登录会话以规避反爬验证；采用 4 级渐进输入提交验证与确定性状态机，未确认提交时标记 needs_attention 以避免重复生成；支持 Veo 2/3、Imagen 3 等模型，遵循 MIT 协议。

  10. arXiv · cs.AI54

    OS-Wizard 论文提出知识引导的自动轨迹采集框架，微调模型在专用桌面任务上超过人类水平

    论文提出 OS-Wizard，一个面向专用桌面软件的自动轨迹采集框架，结合教程引导探索与 GUI 和代码混合动作空间，并在树探索中检查点和回访关键状态。采集的 10.9K 条轨迹含 54.9K 个状态动作样本，微调开源 base 模型后在专用桌面工作流基准上提升 58.2 个百分点至 64.1%，超过报告的人类水平 59.8%；仅用 GUI 动作也能提升通用桌面任务表现。

    推荐理由：论文给出了一条自动化采集专用软件操作轨迹的完整路径，含方法、数据规模和微调后的对比结果，可作同类工作的方法参考。

  11. prompts.chat · 每日 prompt24

    新增 prompt：蒸汽火车穿越石制高架桥（图生视频动画）

    prompts.chat 新增一条图生视频动画 prompt，以「蒸汽火车穿越秋日河谷石制高架桥」图像为精确首帧，生成 6 秒电影感镜头。prompt 规定火车头沿桥面向左匀速行驶并牵引四节栗色车厢，蒸汽与烟雾持续冒出并向右飘散，镜头缓慢左移，要求运动符合物理、无切换、无新增物体、无人物与文字。

  12. GitHub · 3D 生成新仓库44

    Rollmon：浏览器单机宝可梦草稿自走对战游戏发布

    开源项目 Rollmon 是一款完全在浏览器运行的宝可梦草稿自走对战游戏：玩家通过「世代×属性」老虎机抽选六只宝可梦并配置配招，再由 AI 操作队伍挑战十个 Boss 队伍并上传排行榜。战斗 AI 采用 poke-engine（Rust 编译为 WebAssembly），由 @pkmn/sim（Pokémon Showdown 模拟器）裁定，均在本地 Web Worker 运行，无战斗服务器。游戏内置超过 1,100 套约 650 种宝可梦的配招，支持手机与中英日文，桌面端每 100 ms 可跑约 220k 次搜索迭代，iPhone 16 Pro 达其约 85%。

  13. Hugging Face · 新模型：uncensored35

    mr-sus 发布 Minecraftism 4B Thinking Uncensored GGUF 量化版本

    mr-sus 在 Hugging Face 发布 Minecraftism 4B Thinking Uncensored 的 GGUF 量化版本，该模型是 Minecraft 玩家机器人 PyMC Bot 的"大脑"，基于 huihui-ai 的 Qwen3-4B-Thinking-2507-abliterated 微调，共 4.02B 参数。Q4_K_M 量化为 2.5 GB，留出集评测中 100% 输出有效 JSON、68.8% 动作正确；模型先写思考再输出 JSON 动作，采用 abliterated 无审查基座，可通过 Ollama 或 llama.cpp 运行，微调采用 PolyForm Noncommercial 1.0.0 许可。

  14. arXiv · cs.AI41

    XLand-MiniGrid 记忆优势审计：是记忆还是时钟？

    一项 XLand-MiniGrid 审计研究发现，LSTM 智能体对无记忆 MLP 的 25 个百分点优势，大部分来自知道时间步——回合在固定上限截断且奖励随时间衰减。分离训练 seed、地图与评估噪声的 60 次运行显示，"任务习得"二值判定中 76% 是评估噪声，检测 10 点差距需约 10 个配对 seed。给无记忆基线提供时间步后差距缩至 3.3 点内，作者已发布协议、工具与全部 checkpoint。

  16. arXiv · cs.CL46

    IntentDelta：一个人工构建的用户意图演化基准

    研究者推出 IntentDelta，一个人工构建的多轮对话基准，涵盖 WebShop 和 TravelPlanner 上 638 条轨迹、3,766 轮交互，每轮配对用户话语、累积意图状态与人工参考动作。评测显示 11 个智能体平均 Intention Recovery 在 TravelPlanner 为 33.1%、WebShop 为 44.7%，平均 Action Score 分别为 31.6% 和 41.0%。智能体难以保留早期需求、区分软偏好与硬性约束，且意图恢复正确也不保证执行成功。

  17. arXiv · cs.AI34

    ProMo3D：探测冻结 3D 基础模型中的运动线索

    ProMo3D 论文提出基于探测的运动蒸馏方法（PMD），发现冻结的 3D 基础模型 token 中已编码可解码的运动相关信息。PMD 将相对固定锚点 token 的成对运动状态兼容性分数转化为密集运动掩码，仅用 160 段 YouTube-VOS 视频和单张 16 GB GPU 训练。该方法零样本迁移至 DAVIS、SegTrackv2 和 FBMS-59，优于免训练启发式方法，接近更重的监督与自监督方法。该论文已被 NeurIPS 2026 主会接收。

  18. arXiv · cs.AI48

    Scan2Instruction 与 PRPT-KS 实现免示例语言引导导航适配，一次扫描即可

    Scan2Instruction 将一段 iPhone 扫描编译为完整训练环境，自动合成带接地指令的可执行导航片段，PRPT-KS 则通过从重建场景直接读取的闭式 Pareto 效用适配策略，无需学习 critic 和人工标注。在五个真实环境中，RealNav 真机成功率达 85%，高于用人工示教后训练基线的 49%；在同建筑未扫描区域仍达 82%，基线为 41%。

  19. arXiv · cs.AI39

    RoboReason：通过可扩展数据生成提升 VLM 机器人相关推理能力

    研究者提出 RoboReason 方法，用真实机器人立体相机与腕部相机的时空排序任务评测 VLM 视觉推理，发现多个 SOTA 模型在帧排序、深度排序和左右排序任务上表现不佳。团队设计了可扩展的自主训练数据生成流水线，对该数据做监督微调和强化学习，显著提升了模型在时空排序任务及下游机器人与视觉推理任务上的表现。

  20. arXiv · cs.AI37

    InfiniteWorld 基准：将视觉证据与熟悉物理规律分离

    InfiniteWorld 是一个物理推理基准，通过模拟器视频系统性改变物理参数来生成配对问题，涵盖定律识别、参数估计、时序推理、反事实比较和定律归纳五项任务。对多款视频-语言模型的评测显示，模型普遍偏好熟悉物理规律，即使在观测物理改变时仍常给出 Earth-normal 答案；视频帧能提升多数模型表现，但增益因任务而异。

  21. arXiv · cs.AI23

    C-DFF：面向自动驾驶感知仿真验证的机制对等概念级诊断方法

    研究者提出 C-DFF，一种用于真实-合成配对评估的概念级机制对等诊断方法，可判断自动驾驶系统在仿真中是否依赖与真实图像相同的视觉证据。该方法从冻结的被测系统提取决定性证据，经分割模型映射到语义概念空间，比较概念重要性向量。在 KITTI 与 Virtual KITTI 2 的 2126 组匹配对上对三个冻结 SUT（转向回归、YOLOP 可行驶区域、YOLOP 车道线）的评估显示，输出一致并不等于机制对等，C-DFF 可支持验证分诊与仿真器调试。

10月24日周六
  1. GitHub · 灵魂体仓库54

    CoworkLab 开源 agent-mobile-x，用手机端 App 加 Gemini 驱动安卓自动操控

    CoworkLab/agent-mobile-x 是一个通用自主安卓手机控制智能体，手机 App 充当本体，云端 LLM（Gemini，BYOK）负责推理和选工具，无硬编码命令解析。仅用 AccessibilityService 和公开 intent，无需 PC、ADB、root 或 Shizuku；银行/FLAG_SECURE 屏幕被禁止操作，锁屏无法打开，密码和验证码不存储，每步推理耗时数秒并消耗配额。支持模型配额耗尽后自动轮换（429 时按冷却阶梯重试），技术栈为 Kotlin 2.4、Compose、Room 等，minSdk 26 / targetSdk 36。

  2. arXiv · cs.CL49

    PreView：用预处理视图与线索增强 GUI Grounding

    PreView 是一种辅助预处理器，无需再训练即可提升现有 GUI grounding 模型的输入质量，提供任务相关视图和候选-specific 线索（红圈标记与文字提示）两类特征。轻量辅助模型预测并微调中心点、裁剪局部视图并放大，冻结的 grounding 模型据此输出最终点击。在五个 benchmark 上，PreView 提升了 Qwen3-VL-2B、OS-Atlas-4B 和 Qwen3-VL-4B 的平均 grounding 准确率。

  3. GitHub · 去对齐工具与仓库31

    STE Slicer 7.10 插件 MCP-STE-Slicer：为切片器接入 AI 助手

    hikinokomora 发布面向 STE Slicer 7.10（Stereotech）的插件 MCP-STE-Slicer，添加 AI 助手聊天：用户附上模型与技术任务书或用文字描述需求，助手自动选择 3D 或 5D 打印模式、材料与设置，定向模型、切片并保存项目和 G-code，并解释每项决策。插件通过 OpenAI 兼容 API 连接 LLM，需 Windows 10/11 与 Stereotech Hybrid 530 V5.2.4 打印机，5D 模式需激活 ATSS 许可证。

  5. prompts.chat · 每日 prompt31

    新增 prompt：喜马拉雅悬崖修道院场景概念简报生成器

    prompts.chat 收录新 prompt「Himalayan Cliffside Monastery Scene Concept Brief Builder」，让 AI 扮演电影级环境设计师，为悬崖修道院场景生成可用于静态图像生成及后续视频动画的制作简报。该 prompt 通过自定义变量设定山景、时间天气、修道院外观、视觉风格和氛围，先询问相机视角等缺失信息，再产出包含场景概述、修道院与悬崖、经幡等分节的简报，重点加入经幡飘动、云雾流动、香烟升起等易动画元素。

  6. Reddit · r/LocalLLaMA63

    Nvidia 新解锁补丁实测：中国版 RTX 3080 20GB prefill 提速最高 28.6%

    Reddit 用户 /u/No-Refrigerator-1672 在 2x RTX 3080 20GB（PCIe 3.0 x16、240W 功耗限制）上实测 Zaggita 发布的 GPU 性能解锁补丁，该补丁修复 Nvidia 对消费卡 AI 相关硬件指令的算力限制。用 vLLM 0.32.0 跑 cyankiwi/Swift-1.5-Qwen3.8-27B-AWQ-INT4（fp8 KV cache、MTP 开启）测试，prefill 吞吐提升 20.8% 到 28.6%（提示越长提升越大），TTFT 下降 17.2% 到 22.3%，decode 步速基本不变；MTP 实际接受率约 2，实际生成速度约 45 tok/s。

    推荐理由：作者在双 RTX 3080 20GB 上实测 Zaggita 的解锁补丁，给出了从 8k 到 262k 提示长度的 prefill 提速数据和解码不变的结论。

  7. arXiv · cs.AI51

    SceneBloom 提出 Agent 式室内环境生成框架，服务具身学习

    论文提出 SceneBloom，一个结合视觉布局采样与契约引导 3D 编译的 Agent 式室内环境生成框架：分层采样器用扩散先验在功能区生成家具布局，编译器再做几何拟合与局部姿态校正。在五类房间中视觉质量与物理稳定性最高，且是对比方法中唯一没有网格碰撞和越界物体的方法；在这些场景中训练的目标导航策略在 held-out 真实扫描上的成功率高于用同等数量真实训练扫描训练的策略。代码已开源。

  8. arXiv · cs.AI33

    RobustRLlib：面向鲁棒强化学习算法的统一库与基准

    RobustRLlib 是一个面向鲁棒强化学习的算法库与基准，以统一接口集成 17 种代表性在线、离线与安全 RL 算法。其评测平台覆盖多样真实扰动及人形与视觉-语言-动作任务，并基于 273 种扰动配置给出当前鲁棒 RL 算法的能力地图，揭示仍存在显著鲁棒性缺口之处。项目以开源形式提供可复现、可扩展的代码库。

  9. arXiv · cs.AI51

    DexPort：面向灵巧手数据采集的手持技能接口

    研究团队发布 DexPort，一种面向高自由度灵巧手的便携式数据采集接口，采集与部署使用相同手部硬件以避免 embodiment 差异，无需机器人臂即可在非结构化环境采集演示。操作者只控制机械腕运动并选择或调整技能来协调手指，共采集超 2,500 条演示；行为克隆训练的 visuomotor 策略在 4 项任务上评测，使用记录的机器人命令替代状态使成功率从 11% 提升到 64%，加入真实环境数据后从 36% 提升到 78%。论文地址 https://arxiv.org/abs/2610.32969v1

  10. GitHub · 灵魂体仓库31

    ApronPilot：基于 ROS 2 + Gazebo 的语音指挥机场机坪自动驾驶车辆仿真项目

    GitHub 开源项目 ApronPilot 在 ROS 2 + Gazebo 中仿真了一辆机场机坪自动行李牵引车：Whisper（faster-whisper）负责语音识别，Ollama 上的 LLM 解析 ATC 风格指令为结构化意图，但所有命令必须先通过确定性安全门（禁区、hold-short 线、限速、语音复诵确认）才会执行，不安全或含糊指令一律拒绝。仿真环境包含 A1–A4 四个机位、Bravo 与 Charlie 两条滑行道、A3 附近的受限发动机运行区，机器人采用差分驱动，配备 20 m 范围 360° 2D LiDAR 与 640x480 摄像头，通过 Nav2 规划路径。

  11. GitHub · 灵魂体仓库61

    fuba-browser 发布 3.6.0：面向 LLM 智能体的 Docker 浏览器自动化工具

    fuba 在 GitHub 发布 fuba-browser，这是一个运行在 Docker 中的 Chromium 浏览器自动化工具，通过 REST API 和 CLI（fbb）供 Claude Code 等 LLM 智能体控制浏览器，主打解决 Chrome DevTools MCP 的 token 消耗问题。工具提供 Snapshot/Ref 无障碍树元素定位、Web VNC 远程访问、认证状态保存加载、网络检查与下载捕获 API，可选 NVIDIA/AMD GPU 硬件加速，最新镜像为 ghcr.io/fuba/fuba-browser:3.6.0，MIT 许可，API 设计受 vercel-labs/agent-browser 启发。

    推荐理由：面向 LLM 智能体的 Docker 浏览器自动化工具，REST API 配合 Snapshot/Ref 定位，主打降低 Chrome DevTools MCP 的 token 消耗。

  12. GitHub · 灵魂体仓库44

    Narek-D8v 开源 Windows 语音助手 Nemesis-desktop

    Narek-D8v 在 GitHub 以 GNU GPLv3 许可开源了面向 Windows 的 Python 语音助手 Nemesis-desktop，带 PySide6 图形界面和可调用工具的 LLM 智能体，通过 LiteLLM 支持 Gemini、OpenAI、Anthropic、OpenRouter 与 Ollama，并在多家供应商间自动 fallback。助手具备屏幕“查看”与控制能力，支持多种唤醒词、语音识别与合成的离线方案，提供文件、命令行、网页搜索等工具调用。其视觉能力可自动在多模态模型（如 gemini-2.0-flash、gpt-4o）与本地 OpenCV + Windows OCR 流水线间切换。

10月23日周五
  1. GitHub · 3D 生成新仓库14

    YashShengale 开源 Electrolyte_Box_Detection_-_Management_System：基于 YOLO + OpenCV 的电解质箱实时检测与管理系统

    YashShengale 在 GitHub 发布全栈开源项目 Electrolyte_Box_Detection_-_Management_System，用 YOLO + OpenCV 在 Raspberry Pi 搭配 Hailo AI 加速器上实时检测并计数电解质箱。系统含 Flask 检测服务器（:8000）、Node.js/Express 后端（:5000）、React 前端和 SQLite 存储，支持会话追踪、统计看板、challan 生成与基于角色的访问控制。

  2. arXiv · cs.AI27

    AWARE：面向机器人动力学预测与内省的自适应世界模型异常识别框架

    AWARE 是一个仅需外部摄像头监控即可进行异常检测的世界模型框架，通过系统动力学估计与状态预测识别异常，适用于缺乏车载传感器或禁止接入的旧有硬件。在 240 条真实机器人吊车轨迹（含载荷碰撞与电机退化）上评测，其异常分类效果比较强基线提升 26%，且动力学参数可解码定位故障源，电机退化定位准确率达 88%。

  3. arXiv · cs.AI22

    Agentic Hazard Mapper：用 AI 智能体模拟专家制图流程生成灾害风险地图

    研究者提出 Agentic Hazard Mapper，一个多智能体系统，通过模拟专业制图工作流程与迭代设计权衡，自动化生成适配不同数据、地点和灾害情境的灾害风险地图。用户研究与专家访谈显示，系统生成的地图提升了参与者的空间理解与疏散规划表现，降低了工作量感知和任务完成时间，且总体上比市政地图更受青睐。

  5. arXiv · cs.AI23

    Conditional Neural Processes 用于动作模仿中的自监督目标发现

    受婴儿通过模仿学习新任务的能力启发，该研究评估了 Conditional Neural Processes 能在多大程度上自主学到蕴含潜在目标的动作表征。结果表明，在隐空间引入 attention 机制可促使鲁棒的目标表征在动作序列观察早期即涌现。该工作在 IROS2023 认知机器人世界模型与预测编码研讨会以海报形式发表，被视为机器人自监督通用学习器的一个有前景的方向。

  6. arXiv · cs.AI54

    用学习到的速度先验重定时机器人演示数据的 arXiv 论文

    Seungyong Moon 等提出从大规模演示数据中学习速度先验，根据任务指令、运动路径和沿线图像预测执行速度分布，用选定分位数定义一致的时钟来重定时各条演示。该先验在机器人遥操作和人类手持演示数据上拟合，用于在微调视觉-语言-动作（VLA）策略前将机器人演示重定时到手持节奏，并配实时最优控制层按预测节奏追踪动作块。在 120 个 RoboLab 任务上，用学到的时钟微调的策略成功率更高、jerk 最多减半；真实机器人上叠杯用时 3.50 秒，比默认策略的 6.02 秒快 1.72 倍，成功率相当（30 次试验成功 29 次）。论文：https://arxiv.org/abs/2610.32676v1

    推荐理由：提出用学到的速度先验统一重定时机器人演示数据，配合最优控制层追踪动作块，读者可关注其对 VLA 微调数据质量的处理思路。

  7. GitHub · 灵魂体仓库56

    Chetan Sroay 开源 Debutly：用 AI 智能体模拟首批用户实测 Web 应用

    开发者 Chetan Sroay 在 GitHub 发布 Debutly，用 Playwright 和 Chromium 驱动的 AI 智能体在真实浏览器中模拟首批用户，注册、确认邮箱、选套餐、邀请队友并使用产品，输出带复现步骤和截图的缺陷报告。支持无障碍需求模拟、怀疑型买家评估器、GitHub Actions 定时运行和成本上限，AGPL-3.0 开源；附多种模型对比，z-ai/glm-5.3-flash 每步 3.8 秒、每次运行 $0.004，与更贵的 google/gemini-3.8-flash 找到相同的 5 个种子缺陷中的 4 个。

    推荐理由：作者附上了多种模型在同一含种子缺陷测试应用上的对比数据，读者可以据此选驱动模型并控制成本。