跳到正文
arXiv · cs.CL· Yang Liu·· 7 天前AI 评分39

Speak vs. Know:平衡大语言模型的行为分布与知识分布

Speak vs. Know: Balancing Behavior and Knowledge Distributions of Large Language Models

来源与原文

arXiv · cs.CL

作者:Yang Liu

发布时间:(北京时间)

阅读原始来源 · arxiv.org ↗
完整链接与内容说明

https://arxiv.org/abs/2610.27648v1

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

一项 arXiv cs.CL 研究发现,LLM 输出文本所表达的观点分布(知识分布)与其 log-probability 分布(行为分布)并不一致:在 World Values Survey 问题上,三个 LLM 平均有 37% 的最可能答案在两种分布下不同。作者提出一种可学习的组合分布方法,在六个模型、三个调查数据集上,将行为一致性从 71.6% 提升至 95.6%,而与人类观点分布的总变差距离仅从 28.8% 升至 33.8%。

来源:arXiv · cs.CL · arxiv.org