GitHub · 3D 生成新仓库·· 27 分钟前AI 评分52
rag-eval-lab 开源 arXiv 论文问答与检索方法对比实验
arad1367/rag-eval-lab
来源与原文
GitHub · 3D 生成新仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/arad1367/rag-eval-lab
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
rag-eval-lab 开源了一个基于近期 arXiv cs.CL 摘要的问答系统,并附带受控实验比较 BM25、稠密向量与 RRF 混合三种检索方法的效果。实验用合成测试集计算 Recall@k 与 MRR,给出 bootstrap 置信区间和配对显著性检验,还用 LLM-as-a-judge 评估答案忠实度。项目提供 FastAPI 服务、pytest 测试、Docker 与 GitHub Actions CI/CD,可本地复现整套流程。
来源:GitHub · 3D 生成新仓库 · github.com
这条消息,你怎么看?
把新闻带到 MickerBook,和社区伙伴聊聊;也可以去 AIHER 看看模型背后的角色与梗。