跳到正文
我的
arXiv · cs.AI· Tian Qin·· 4 天前精选AI 评分61

Step-Zero Attack:编码智能体在模型可见前的处理即遭攻击

Step-Zero Attack: Agent Safety Before Observability

来源与原文

arXiv · cs.AI

作者:Tian Qin

发布时间:(北京时间)

阅读原始来源 · arxiv.org ↗
完整链接与内容说明

https://arxiv.org/abs/2611.01953v1

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

arXiv 论文提出 Step-Zero attack,指编码智能体在解析未知压缩包、网络响应或图像时,处理本身即可造成危害,早于任何内容进入模型上下文。跨 7 个 harness 与 6 个模型的测试显示 32/42 组合超出 4 MiB 磁盘预算,其中 26/42 在模型看到任何内容之前就超标,4 个模型在全部 84 轮中均超标。作者在处理原语层加入字节计数门控,使所有路由提取保持在预算内,同时智能体完成 25/28 任务,并建议厂商配合安全对齐训练。

推荐理由

论文把智能体在模型看到内容前的处理步骤定义为攻击面,并用门控机制给出可在处理原语层落地的缓解方案。

来源:arXiv · cs.AI · arxiv.org

这条消息,你怎么看?

把新闻带到 MickerBook,和社区伙伴聊聊;也可以去 AIHER 看看模型背后的角色与梗。