arXiv · cs.AI· Niclas Hart·· 7 天前AI 评分38
RAG-NIMBF:用于自动化 RAG 配置分析的非侵入式模块化基准测试框架
RAG-NIMBF: A Non-Invasive, Modular Benchmarking Framework for Automated RAG Configuration Analysis
来源与原文
arXiv · cs.AI
作者:Niclas Hart
发布时间:(北京时间)
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.27816v1
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
RAG-NIMBF 是一个模块化基准测试框架,以非侵入方式附加到现有 RAG 管道上,通过受控消融和端到端实验追踪评估 chunking、embedding、检索、reranking、提示词与生成模型的配置空间。在 SQuAD 数据集上的验证显示,MMR 使 nDCG@5 提升 +4 至 +11 个百分点;更详细的提示词指令在 Qwen3.6-27B、GPT-4o-mini 和 Qwen3.5-think 上使答案忠实度提升 +10 至 +13pp,但在 20B 生成模型上效果可忽略。
来源:arXiv · cs.AI · arxiv.org