arXiv · cs.AI· Prajvi Saxena·· 5 天前AI 评分44
诊断 LLM 的显式到应用心智理论鸿沟
Diagnosing the Explicit-to-Applied Theory of Mind Gap in LLMs
来源与原文
arXiv · cs.AI
作者:Prajvi Saxena
发布时间:(北京时间)
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.31060v1
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
一项 arXiv 研究指出,LLM 的 ToM 基准总分混淆了显式 ToM(识别信念)与应用 ToM(用信念预测行为)。在 SimpleToM 上,Llama-3.1-8B 总分 51.5%,但识别心理状态达 99.4%,预测行为仅 28.9%。提出 BSTTT 结合提醒语后,Llama 行为预测提升 40.8 个百分点,其中提醒贡献大部分,BSTTT 额外增加 1.3 至 5.5 个百分点,研究者建议分别报告显式与应用准确率。
来源:arXiv · cs.AI · arxiv.org