arXiv · cs.CL· Daniel Robert Kling Alexander·· 20 天前AI 评分44
无真值下的有效性评估:陈述偏好经济学能为大语言模型评测带来什么
Validity Without Ground Truth: What Stated-Preference Economics Offers the Evaluation of Language Models
来源与原文
arXiv · cs.CL
作者:Daniel Robert Kling Alexander
发布时间:(北京时间)
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.10506v1
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
一篇 arXiv 论文提出用陈述偏好经济学的有效性框架(内容、构念、效标有效性、可靠性、激励相容等)评测大语言模型。作者将 Vossler 等 2023 年发表的水质经济价值评估问卷施测于六个模型,以需求向下倾斜、支付意愿随商品范围和收入变化等经济学理论预测为检验。结果分化明显:两个较旧模型在 75,000 美元家庭收入水平上未通过最基本检验,两个最新模型通过全部理论有效性检验但在聚合有效性上出现分歧。
来源:arXiv · cs.CL · arxiv.org