arXiv · cs.AI· Robert Pasternak·· 18 小时前AI 评分24
提示词与 token 概率如何评估语言模型的语言能力：来自语义焦点敏感性的证据
Prompts and probabilities in the linguistic assessment of language models: Evidence from semantic focus-sensitivity
来源与原文
arXiv · cs.AI
作者：Robert Pasternak
发布时间：（北京时间）
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.39923v1
本站目前仅有 AI 导读与摘要，未展示原文正文；技术细节、代码和完整结论请查看原始来源。
AI 导读
arXiv 一项研究以语义焦点敏感性为测试域，比较显式提示词与 token 概率两种方法评估语言模型的语言能力。测试发现 token 概率方法普遍高于随机水平，而部分较大模型中提示词方法大幅胜出；用随机生成的焦点标记替换标准标记后，token 概率性能下降明显大于提示词方法。这表明元语言提示在测试风格非典型数据时可能更稳健。
来源：arXiv · cs.AI · arxiv.org