跳到正文
arXiv · cs.CL· Daniel Robert Kling Alexander·· 20 天前AI 评分44

无真值下的有效性评估:陈述偏好经济学能为大语言模型评测带来什么

Validity Without Ground Truth: What Stated-Preference Economics Offers the Evaluation of Language Models

来源与原文

arXiv · cs.CL

作者:Daniel Robert Kling Alexander

发布时间:(北京时间)

阅读原始来源 · arxiv.org ↗
完整链接与内容说明

https://arxiv.org/abs/2610.10506v1

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

一篇 arXiv 论文提出用陈述偏好经济学的有效性框架(内容、构念、效标有效性、可靠性、激励相容等)评测大语言模型。作者将 Vossler 等 2023 年发表的水质经济价值评估问卷施测于六个模型,以需求向下倾斜、支付意愿随商品范围和收入变化等经济学理论预测为检验。结果分化明显:两个较旧模型在 75,000 美元家庭收入水平上未通过最基本检验,两个最新模型通过全部理论有效性检验但在聚合有效性上出现分歧。

来源:arXiv · cs.CL · arxiv.org