arXiv · cs.CL· Meysam Sabbaghan·· 6 天前AI 评分25
B-CARE:面向立场分类错误排序的盲评类相对证据评估框架
B-CARE: Blind Classwise Assessment of Relative Evidence for Stance Error Ranking
来源与原文
arXiv · cs.CL
作者:Meysam Sabbaghan
发布时间:(北京时间)
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.29350v1
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
B-CARE(Blind Classwise Assessment of Relative Evidence for Stance Error Ranking)是一种预测盲的错误排序框架,用固定 LLM 验证器对各候选立场标签赋证据分,对比最强替代类与预测类的证据来构建风险分。该框架在 4 个立场基准和 3 个异构基座 LLM 上的 12 个数据集-模型组合、5,206 条测试实例中评测,取得平均 AUROC 0.735、平均 AUPRC 0.524,并在风险最高的 20% 预测中捕获 41.06% 的错误;其证据信号可跨模型复用,与置信度基线互补。
来源:arXiv · cs.CL · arxiv.org