arXiv · cs.CL· Yang Liu·· 7 天前AI 评分39
Speak vs. Know:平衡大语言模型的行为分布与知识分布
Speak vs. Know: Balancing Behavior and Knowledge Distributions of Large Language Models
来源与原文
arXiv · cs.CL
作者:Yang Liu
发布时间:(北京时间)
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.27648v1
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
一项 arXiv cs.CL 研究发现,LLM 输出文本所表达的观点分布(知识分布)与其 log-probability 分布(行为分布)并不一致:在 World Values Survey 问题上,三个 LLM 平均有 37% 的最可能答案在两种分布下不同。作者提出一种可学习的组合分布方法,在六个模型、三个调查数据集上,将行为一致性从 71.6% 提升至 95.6%,而与人类观点分布的总变差距离仅从 28.8% 升至 33.8%。
来源:arXiv · cs.CL · arxiv.org