arXiv · cs.CL· Parv Khatri·· 19 小时前AI 评分44
知识冲突类型识别需要 LLM 吗?RAG 中决策模型的评测研究
Do We Need an LLM to Know Why Sources Conflict? Decision Models for Knowledge-Conflict Typing in RAG
来源与原文
arXiv · cs.CL
作者:Parv Khatri
发布时间:(北京时间)
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.36915v1
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
一项 arXiv 研究用 CONFLICTS benchmark 评估 11 个决策模型(来自 7 家提供商)在 RAG 知识冲突类型分类上的表现,其中 10 个准确率匹配或超过 Gemini 2.5 Flash(61.3%),成本低 4--39x、延迟低 2.6--6.0x。将决策模型最不置信的四分之一查询级联到 Gemini 3.8 Flash(70.0%),有 8 个模型可与其准确率持平且仅为其 25--37% 成本。研究已开源代码、提示词及全部模型输出。
来源:arXiv · cs.CL · arxiv.org