arXiv · cs.CL· Ava Iranmanesh·· 1 天前AI 评分33
HEARSAYBENCH:AI 能否从抽象人权导航到真实处境?
HEARSAYBENCH: Can AI Navigate from Abstract Human Rights to Lived Lives?
来源与原文
arXiv · cs.CL
作者:Ava Iranmanesh
发布时间:(北京时间)
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.39062v1
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
HEARSAYBENCH 是一个人工构建的基准数据集,包含 400 个经当地区域人工核验的测试案例,基于联合国人权报告,覆盖 80 多个地区的战争、无国籍、流离失所等结构性约束场景,检验 LLM 能否区分用户“形式上有权做”与“实际能做”。对 14 个闭源与开源权重模型的测试显示,所有模型理解用户处境的能力都优于给出建议的能力,更强模型差距缩小,但建议仍不安全,难以转化为可执行的指导。
来源:arXiv · cs.CL · arxiv.org