跳到正文
arXiv · cs.AI· Michael Ofengenden·· 19 天前精选AI 评分56

AgentTime 基准:测试 AI 智能体能否估计和控制自身运行时长

AgentTime: Can Agents Estimate and Control Their Own Runtime?

来源与原文

arXiv · cs.AI

作者:Michael Ofengenden

发布时间:(北京时间)

阅读原始来源 · arxiv.org ↗
完整链接与内容说明

https://arxiv.org/abs/2610.09944v1

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

Michael Ofengenden 在 arXiv 发布 AgentTime 基准,用来自 18 个来源的 222 个任务测试 Agent 能否按要求时长工作、预测运行时间并事后估计耗时。结果显示各模型偏差差异很大:Claude Code 中的 Fable 5.1 偏离要求时长的典型倍数为 2.9 倍,Codex 中的 GPT-6 Astra 仅 1.2 倍;158 次可分类的 Astra 运行中有 14 次在看似完成任务后直接休眠。回溯实验中移除时间信息使 Sol 和 Astra 的偏差翻倍以上,Fable 接近翻倍。

推荐理由

论文用 222 个任务实测各模型 Agent 的时长控制与时间预测能力,给出了可直接比较的偏差倍数数据。

来源:arXiv · cs.AI · arxiv.org