arXiv · cs.CL· Zeyu Shan·· 17 天前AI 评分33
LongHisDoc:首个中文长篇历史文档理解基准发布
LongHisDoc: A Comprehensive Benchmark for Chinese Long Historical Document Understanding
来源与原文
arXiv · cs.CL
作者:Zeyu Shan
发布时间:(北京时间)
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.14531v1
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
LongHisDoc 是首个面向长篇(整本)中文历史文档理解的基准,包含来自 101 份 PDF 的 1,012 条专家标注 QA 对,平均每份 85.1 页、42,776.4 tokens,覆盖 10 个类别和单页、跨页、多跳、不可回答四类问题。评测显示最强 LVLM 和 LLM 准确率仅 62.9% 和 69.9%,同时基准还评测了多模态检索器与端到端 RAG 性能,基准和评测代码已开源。
来源:arXiv · cs.CL · arxiv.org