arXiv · cs.AI· Detao Zeng·· 4 天前AI 评分45
Async-RBench：评测 LLM Agent 异步任务执行的基准
Async-RBench: Benchmarking Asynchronous Task Execution in LLM Agents
来源与原文
arXiv · cs.AI
作者：Detao Zeng
发布时间：（北京时间）
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.32429v1
本站目前仅有 AI 导读与摘要，未展示原文正文；技术细节、代码和完整结论请查看原始来源。
AI 导读
Async-RBench 是一个面向 LLM Agent 异步任务执行的基准，包含覆盖八个场景的 200 个可执行任务，并通过场景控制器与 Event Response Contract（ERC）规范结果处理，同时以 Dynamic Replanning Score（DRS）独立于任务成功率进行评分。对九个 Agent 的评测显示 DRS 得分为 19.2 到 45.1，且异步交付下任务成功率平均为 26.0%，低于批量交付的 29.7%；对其中三个 Agent 在每次收到结果后重建计划的提示策略仅带来 2.6 到 3.5 分的 DRS 提升。
来源：arXiv · cs.AI · arxiv.org