跳到正文
arXiv · cs.CL· Jerzy Kamiński·· 21 天前AI 评分49

研究揭示 LLM 何时该拒答:潜在欠规范信号的跨域与多轮泛化

Knowing When Not to Answer: Cross-Domain and Multi-Turn Generalization of Latent Underspecification Signals

来源与原文

arXiv · cs.CL

作者:Jerzy Kamiński

发布时间:(北京时间)

阅读原始来源 · arxiv.org ↗
完整链接与内容说明

https://arxiv.org/abs/2610.08413v1

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

一项 arXiv 研究构建了含 423 段对话、1,661 个标注 turn-states 的多轮基准,用六个数据集和六个开源权重 LLM 检验「不可回答性」探测信号。数学与阅读理解(SQuAD 2.0、MuSiQue)间探测迁移稳健(AUROC 0.77-0.97 与 0.77-0.90),但单轮探测零样本无法识别对话何时变得可回答。基于校准探测的门控无需微调即可远超随机水平地识别欠规范回合,端到端成功率距真实标签门控仅差 0.08,但并未稳定优于普通生成,主要差距在模型如何利用澄清而非检测本身。

来源:arXiv · cs.CL · arxiv.org