arXiv · cs.AI· An-Sheng Jhang·· 7 天前AI 评分27
Hearsay or Fact?框架设计与引导方式如何影响 LLM 概率更新
Hearsay or Fact? How Framing and Elicitation Shape LLM Probability Updates
来源与原文
arXiv · cs.AI
作者:An-Sheng Jhang
发布时间:(北京时间)
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.27745v1
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
一项基于 δ-SNLI 数据集的研究测试了 LLM 收到单条新信息时概率估计的移动幅度,涵盖 Qwen3-8B、OLMo-2-7B 两种本地模型及五种 agent 命令行配置。在直接陈述引导下,全部七种配置均朝标注方向移动 18-28 个百分点;改用“有人说”转述则降低移动幅度 2-5 个百分点。研究还发现,五次加权估计虽减少极端值,但在两个本地模型中使敏感度分别下降 43% 和 68%。
来源:arXiv · cs.AI · arxiv.org