跳到正文
arXiv · cs.AI· Tianxiang Gao·· 13 天前AI 评分34

ReFormBench:评测大语言模型响应条件化格式纠正稳定性的基准

ReFormBench: Benchmarking the Stability of Response-Conditioned Format Correction in Large Language Models

来源与原文

arXiv · cs.AI

作者:Tianxiang Gao

发布时间:(北京时间)

阅读原始来源 · arxiv.org ↗
完整链接与内容说明

https://arxiv.org/abs/2610.19693v1

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

ReFormBench 是一个以模型对同一问题的无约束响应作为格式基线、评测大语言模型格式纠正稳定性的基准,包含源自 910 个源问题的 5,000 个三约束测试实例,覆盖 66 种格式化特征。在十个模型上,EMCR 指标介于 34.04% 至 64.72%,最高的三目标纠正估计为 50.02%,合规与纠正得分产生不同排名。在 Qwen3.5-9B 上的提示词实验同时提升了两个指标,代码与数据已开源。

来源:arXiv · cs.AI · arxiv.org