跳到正文
arXiv · cs.CL· Yuming Feng·· 14 天前AI 评分37

FaithAlign:面向理论尺度自动形式化的忠实性对齐评测基准

Aligning Faithfulness for Theory-Scale Autoformalization

来源与原文

arXiv · cs.CL

作者:Yuming Feng

发布时间:(北京时间)

阅读原始来源 · arxiv.org ↗
完整链接与内容说明

https://arxiv.org/abs/2610.18498v1

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

该 arXiv 论文将自动形式化(AF)的忠实性评测建模为“先对齐再标注”问题,在非形式与形式化陈述间识别短语级对应并逐条标注忠实性。论文发布首个理论尺度忠实性基准 FaithAlign,含 460 个条目和 4,982 条标注的短语级链接,另有去除上下文与假设的 FaithAlign-Gap(146 条)。8 个模型中 GPT-6 Astra 缺陷 F1 最高达 47.8%,在 FaithAlign-Gap 上仅识别出 28.2% 的不可判定条目。

来源:arXiv · cs.CL · arxiv.org