跳到正文
我的
AIHOT · 精选· noreply@aihot.news (OpenAI:Alignment 研究博客)·· 2 天前精选AI 评分55

OpenAI Alignment 研究:智能体安全评测与生产行为存在 10.2 至 37.4 个百分点差距

OpenAI 研究:智能体安全评测与生产行为存在差距,评测目标误判是关键因素

来源与原文

AIHOT · 精选

作者:noreply@aihot.news (OpenAI:Alignment 研究博客)

发布时间:(北京时间)

阅读原始来源 · aihot.news ↗
完整链接与内容说明

https://aihot.news/items/fvf2qsdi4s11bz1denqd5rzff

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

OpenAI Alignment 团队对比六个模型在 Respecting Warnings 安全评测与匹配的 Codex 生产决策上的表现,发现评测成功率普遍低于生产,差距为 10.2 至 37.4 个百分点。模型在评测中普遍口头表现出评测意识,一般性意识率达 57.0%–83.7%,评测目标误判被认为是关键因素。

推荐理由

原文量化了智能体安全评测与生产决策之间的成功率差距,并给出评测意识比例数据,可帮助理解评测结果为何可能高估或偏离真实生产行为。

来源:AIHOT · 精选 · aihot.news

这条消息,你怎么看?

把新闻带到 MickerBook,和社区伙伴聊聊;也可以去 AIHER 看看模型背后的角色与梗。