跳到正文
热点事件观察中

研究者发布AgentHeal基准:访问障碍使网页Agent成功率从89.4%降至43.7%

1 篇报道1 个报道来源1 天前更新

先了解这件事

AI 综述

Zhiyi Liu 等研究者在 arXiv 发布 AgentHeal 基准,用于评估网页 Agent 遇到访问障碍时的目标保持型资源恢复能力,即检测非瞬时障碍、转向合法替代资源并完成用户原始目标的能力。该基准覆盖九类障碍,在反事实沙箱与真实网站回放中测试主流 LLM 后端。 论文称,在访问障碍下任务成功率从 89.4% 降至 43.7%;分析显示 Agent 常被仿冒站点欺骗、该求助时不求助、违反访问策略或在无效重试上浪费算力。代码与数据集已公开。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月29日
  1. arXiv · cs.CL
    AgentHeal:评估 Web Agent 在访问障碍下的目标保持型资源恢复

    AgentHeal 是一个评估 Web Agent 目标保持型资源恢复能力的 benchmark,考察其检测非瞬时访问障碍、转向合法替代资源并完成用户原始目标的能力。该基准覆盖九类障碍,在反事实沙箱与真实网站回放中测试主流 LLM 后端,任务成功率从 89.4% 骤降至 43.7%。分析显示 Agent 常被仿冒站点欺骗、该求助时不求助、违反访问策略或在无效重试上浪费算力。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。