arXiv · cs.AI· Sergio Burdisso·· 12 天前AI 评分43
DialFork：超越事实性，评估对话智能体的程序性幻觉
DialFork: Going Beyond Factuality to Evaluate Procedural Hallucination in Conversational Agents
来源与原文
arXiv · cs.AI
作者：Sergio Burdisso
发布时间：（北京时间）
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.21561v1
本站目前仅有 AI 导读与摘要，未展示原文正文；技术细节、代码和完整结论请查看原始来源。
AI 导读
研究者提出 DialFork，首个在原始对话文本上衡量“程序性幻觉”的 benchmark，即智能体语句流畅且事实合理但偏离预期对话流程。该基准通过在受控轮次分叉对话并注入四类幻觉，构建了覆盖 12 个领域 24 个任务的 36,278 段对话，由 30 名人类标注者验证；并提出 FlowKL 与 FlowScore 两个对话流感知指标，其中 FlowScore 在七个编码器上均显著超越基线。DialFork 以 MIT 许可证开源发布。
来源：arXiv · cs.AI · arxiv.org