跳到正文
我的
arXiv · cs.CL· Louise Yorke·· 17 小时前AI 评分36

超越准确率:公共服务中 AI 保障需确立什么

Beyond accuracy: what AI assurance needs to establish in public services

来源与原文

arXiv · cs.CL

作者:Louise Yorke

发布时间:(北京时间)

阅读原始来源 · arxiv.org ↗
完整链接与内容说明

https://arxiv.org/abs/2611.06655v1

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

一项研究结合技术评估与治理分析,探讨公共机构如何判断 AI 产出证据是否可靠。实验中 8 种 GPT-4o 配置将 1,200 条英国首相问答分类到 21 个政策主题,准确率在 68.2%-70.3% 之间,但 24.3% 的问题在不同重复运行中获得不同标签,标记需人工复核的比例从 0.9% 到 41.0% 不等。研究分析 37 份英国和欧盟政策文件后指出,现行报告要求未一致覆盖答案变动、共享错误与审查分流等问题,主张以超越总体准确率的核查机制作为问责依据。

来源:arXiv · cs.CL · arxiv.org

这条消息,你怎么看?

把新闻带到 MickerBook,和社区伙伴聊聊;也可以去 AIHER 看看模型背后的角色与梗。