arXiv · cs.AI· Jeffrey Olmo·· 5 天前精选AI 评分53
arXiv 论文提出模拟控制评测 SCE，用模型模拟工具响应预测 AI 安全指标
Simulated Control Evals
来源与原文
arXiv · cs.AI
作者：Jeffrey Olmo
发布时间：（北京时间）
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.31593v1
本站目前仅有 AI 导读与摘要，未展示原文正文；技术细节、代码和完整结论请查看原始来源。
AI 导读
论文提出模拟控制评测（SCEs），用语言模型模拟工具响应替代真实环境来拓宽控制评测适用范围。在 LinuxArena 上，SCE 预测安全性的 RMSE 为 3.6 个百分点（5% 审计预算、五个监控器），优于 BashArena 的 10.1，对攻击策略等分布的 KL 散度比 BashArena 低十倍以上，可解释 78-85% 的跨环境方差，且通过模拟发现的策略可提升监控器对留存攻击的表现。
推荐理由
论文用实测数据对比了模拟控制评测与独立控制设置预测安全的误差和 KL 散度，方法可迁移到 AI 控制评测设计。
来源：arXiv · cs.AI · arxiv.org