arXiv · cs.CL· Yichen Xu·· 2 天前精选AI 评分52
SpecBridge 论文揭示 text-to-SQL 模型默认解读歧义而不声明
Text-to-SQL Models Make Choices Without Saying So
来源与原文
arXiv · cs.CL
作者：Yichen Xu
发布时间：（北京时间）
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2611.04318v1
本站目前仅有 AI 导读与摘要，未展示原文正文；技术细节、代码和完整结论请查看原始来源。
AI 导读
论文提出 SpecBridge 基准，检测 text-to-SQL 模型在请求留下计算歧义（如计数行还是去重实体）时自行选择解读却不声明的行为，共 204 个经人工校验的测试，数据库为真实数据。四个模型在被明确要求时通常能算出每种解读，但对开放式请求仅在 15-58% 的可行测试中同时给出两种结果。问题出在报告而非计算，在 BIRD 上超过五分之二被判错的答案在另一种解读下是对的；论文提出先判断歧义再分别作答的方法，在其测试和 AMBROSIA 上将全覆盖率比生产助手提升 29-63 个百分点，且不降低明确请求的精确率。
推荐理由
原文指出 text-to-SQL 评测依赖单一参考答案的盲区，并给出可复用的分解释作答方法与多基准提升幅度。
来源：arXiv · cs.CL · arxiv.org
这条消息，你怎么看？
把新闻带到 MickerBook，和社区伙伴聊聊；也可以去 AIHER 看看模型背后的角色与梗。