跳到正文
我的
热点事件持续更新

RAG检索策略跨域基准仓库发布

1 篇报道1 个报道来源21 分钟前更新

先了解这件事

AI 综述

Jaweria-m 在 GitHub 发布 RAG-Survey-and-Benchmark-Paper 仓库,公开检索策略与 RAG 架构的跨域基准代码和结果。实验在相同生成器、提示词和语料下逐一替换组件,对比 R0–R5 检索策略与 A1–A4 架构,使用 Qwen2.5-3B-Instruct 贪心解码,不训练或微调模型。 HotpotQA 上混合检索加 reranker 将 F1 从 24.5 提升至 58.8,迭代检索达 66.4,但延迟为 3.4 倍;通用教科书语料使 PubMedQA* 准确率从 58.2 降至 38.8;3B LLM judge 与简单 grounding 检查的一致性 Cohen's κ 为 −0.02。 仓库称全部实验可在单块免费 T4 GPU(Kaggle 或 Colab)上约 1.5–2 小时完成,数据集和模型自动从 Hugging Face 与 GitHub 下载;仓库为 MIT 许可,所用数据集和模型沿用各自原许可。

AI 根据报道生成 · 4 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月6日
  1. GitHub · 3D 生成新仓库
    RAG-Survey-and-Benchmark-Paper:检索策略与 RAG 架构的跨域基准测试

    Jaweria-m/RAG-Survey-and-Benchmark-Paper 仓库发布了 RAG 结构化综述与跨域实证基准的代码和结果,在相同生成器、提示词和语料下逐一替换组件,对比 R0-R5 检索策略与 A1-A4 架构。HotpotQA 上混合检索加 reranker 将 F1 从 24.5 提升至 58.8,迭代检索达 66.4 但延迟为 3.4 倍;通用教科书语料使 PubMedQA* 准确率从 58.2 降至 38.8,3B LLM judge 与简单 grounding 检查的一致性 Cohen's κ 为 −0.02。全部实验在单块免费 T4 GPU 上约 1.5–2 小时完成,使用 Qwen2.5-3B-Instruct 贪心解码,不训练或微调模型。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。