arXiv · cs.CL· Hengyu Ye·· 8 天前AI 评分22
从结果到组件:LLM 修复方案的-counterfactual(反事实)评估框架
From Outcomes to Components: A Counterfactual Evaluation Framework for LLM-Proposed Repairs
来源与原文
arXiv · cs.CL
作者:Hengyu Ye
发布时间:(北京时间)
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.26650v1
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
一项 arXiv 研究提出反事实评估框架,将 LLM 生成的修复动作拆分为目标记录与数值更新两部分逐组合执行。在 114 个交通修复动作中,76 个的联合修正收益超过单独修正收益之和;数据库修复中,仅替换为参考更新使 108 个动作中的 17 个恶化,这些动作均选择了未受影响的记录。在留存观测上,候选方案重组后的目标-更新配对选择可恢复参考动作损失降幅的 61.6%,高于仅在方案间选择的 58.0%。
来源:arXiv · cs.CL · arxiv.org