arXiv · cs.CL· Nadhem Zmandar·· 20 天前AI 评分11
基于 Transformer 的长文档金融叙事摘要评估指标比较研究
A Comparative Study of Evaluation Metrics for Long-Document Financial Narrative Summarization with Transformers
来源与原文
arXiv · cs.CL
作者：Nadhem Zmandar
发布时间：（北京时间）
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.09529v1
本站目前仅有 AI 导读与摘要，未展示原文正文；技术细节、代码和完整结论请查看原始来源。
AI 导读
一项研究以 FNS 2020 共享任务数据集（伦敦证券交易所上市公司年报及其摘要）为基准，比较了多种预训练 Transformer 摘要方法与抽取技术，并考察不同评估指标的行为差异。研究者认为部分指标无法真实反映摘要能力，提出由 ROUGE-2 与 BERTscore 调和平均构成的新指标 BRUGEscore，并通过统计显著性检验和三种污染方法的对抗分析验证结果稳健性。
来源：arXiv · cs.CL · arxiv.org