跳到正文
我的
GitHub · 3D 生成新仓库·· 27 分钟前AI 评分52

rag-eval-lab 开源 arXiv 论文问答与检索方法对比实验

arad1367/rag-eval-lab

来源与原文

GitHub · 3D 生成新仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/arad1367/rag-eval-lab

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

rag-eval-lab 开源了一个基于近期 arXiv cs.CL 摘要的问答系统,并附带受控实验比较 BM25、稠密向量与 RRF 混合三种检索方法的效果。实验用合成测试集计算 Recall@k 与 MRR,给出 bootstrap 置信区间和配对显著性检验,还用 LLM-as-a-judge 评估答案忠实度。项目提供 FastAPI 服务、pytest 测试、Docker 与 GitHub Actions CI/CD,可本地复现整套流程。

来源:GitHub · 3D 生成新仓库 · github.com

这条消息,你怎么看?

把新闻带到 MickerBook,和社区伙伴聊聊;也可以去 AIHER 看看模型背后的角色与梗。