跳到正文
arXiv · cs.AI· Niclas Hart·· 7 天前AI 评分38

RAG-NIMBF:用于自动化 RAG 配置分析的非侵入式模块化基准测试框架

RAG-NIMBF: A Non-Invasive, Modular Benchmarking Framework for Automated RAG Configuration Analysis

来源与原文

arXiv · cs.AI

作者:Niclas Hart

发布时间:(北京时间)

阅读原始来源 · arxiv.org ↗
完整链接与内容说明

https://arxiv.org/abs/2610.27816v1

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

RAG-NIMBF 是一个模块化基准测试框架,以非侵入方式附加到现有 RAG 管道上,通过受控消融和端到端实验追踪评估 chunking、embedding、检索、reranking、提示词与生成模型的配置空间。在 SQuAD 数据集上的验证显示,MMR 使 nDCG@5 提升 +4 至 +11 个百分点;更详细的提示词指令在 Qwen3.6-27B、GPT-4o-mini 和 Qwen3.5-think 上使答案忠实度提升 +10 至 +13pp,但在 20B 生成模型上效果可忽略。

来源:arXiv · cs.AI · arxiv.org