arXiv · cs.CL· Jerzy Kamiński·· 21 天前AI 评分49
研究揭示 LLM 何时该拒答:潜在欠规范信号的跨域与多轮泛化
Knowing When Not to Answer: Cross-Domain and Multi-Turn Generalization of Latent Underspecification Signals
来源与原文
arXiv · cs.CL
作者:Jerzy Kamiński
发布时间:(北京时间)
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.08413v1
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
一项 arXiv 研究构建了含 423 段对话、1,661 个标注 turn-states 的多轮基准,用六个数据集和六个开源权重 LLM 检验「不可回答性」探测信号。数学与阅读理解(SQuAD 2.0、MuSiQue)间探测迁移稳健(AUROC 0.77-0.97 与 0.77-0.90),但单轮探测零样本无法识别对话何时变得可回答。基于校准探测的门控无需微调即可远超随机水平地识别欠规范回合,端到端成功率距真实标签门控仅差 0.08,但并未稳定优于普通生成,主要差距在模型如何利用澄清而非检测本身。
来源:arXiv · cs.CL · arxiv.org