arXiv · cs.CL· Yuming Feng·· 14 天前AI 评分37
FaithAlign:面向理论尺度自动形式化的忠实性对齐评测基准
Aligning Faithfulness for Theory-Scale Autoformalization
来源与原文
arXiv · cs.CL
作者:Yuming Feng
发布时间:(北京时间)
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.18498v1
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
该 arXiv 论文将自动形式化(AF)的忠实性评测建模为“先对齐再标注”问题,在非形式与形式化陈述间识别短语级对应并逐条标注忠实性。论文发布首个理论尺度忠实性基准 FaithAlign,含 460 个条目和 4,982 条标注的短语级链接,另有去除上下文与假设的 FaithAlign-Gap(146 条)。8 个模型中 GPT-6 Astra 缺陷 F1 最高达 47.8%,在 FaithAlign-Gap 上仅识别出 28.2% 的不可判定条目。
来源:arXiv · cs.CL · arxiv.org