GitHub · 去对齐工具与仓库·· 6 天前AI 评分21
LLM Evaluation Lab:可复现的 RAG 评测基准平台(开发中)
adamazouzi/llm-evaluation-lab
来源与原文
GitHub · 去对齐工具与仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/adamazouzi/llm-evaluation-lab
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
GitHub 上的开源项目 LLM Evaluation Lab 正在开发中,是一个基于 Python 的可复现 RAG 评测平台,用于在统一数据集和一致条件下比较不同 RAG 配置。计划功能包括 PDF 摄入与分块、基于 Sentence Transformers 和 ChromaDB 的嵌入与向量检索、Precision@k / Recall@k / MRR 等检索指标、延迟与 API 成本估算,以及 FastAPI 后端、Streamlit 交互仪表盘和 Docker 执行,结果通过 SQLite 持久化。
来源:GitHub · 去对齐工具与仓库 · github.com