GitHub · 去对齐工具与仓库·· 6 天前精选AI 评分71
AgentVFS 发布 VFS-Bench 1.0:虚拟文件系统接口比 MCP 平均省 52% token
agentvfs/vfs-bench
来源与原文
GitHub · 去对齐工具与仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/agentvfs/vfs-bench
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
AgentVFS 团队发布 VFS-Bench 1.0 基准,200 个任务(100 个来自 MCP-Atlas、100 个来自 Toolathlon)覆盖 46 个外部服务,每个任务分别通过 MCP 工具调用和虚拟文件系统 AgentVFS 各运行一次,任务文本、数据和评分器完全一致。结果显示虚拟文件系统平均减少 52% token,pass@1 从 77.6% 升至 81.6%,其中 Claude Opus 5.5 在 MCP-Atlas 上 token 减少 88%。基准用本地 fake 服务复现 API,每次运行前重置并重新播种数据,完整榜单和轨迹见 agentvfs.org,仓库地址 https://github.com/agentvfs/vfs-bench。
推荐理由
同一任务在 MCP 与虚拟文件系统两种接口下各跑一遍并保留原始评分器,token 与 pass@1 的对比数据齐全,可复现。
来源:GitHub · 去对齐工具与仓库 · github.com