GitHub · 灵魂体仓库·· 19 天前精选AI 评分56
RAGeval v0.2.1 发布:自托管 RAG 管线 LLM 观测工具,支持多评审一致性打分
Yacine-ai-tech/RAGeval
来源与原文
GitHub · 灵魂体仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/Yacine-ai-tech/RAGeval
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
Yacine-ai-tech 在 GitHub 发布 RAGeval v0.2.1,一个自托管 LLMOps 观测工具,通过 drop-in Python 装饰器为 RAG 管线的每次调用报告 groundedness、faithfulness、检索相关性、成本和延迟,仪表盘默认运行在 localhost:8003。核心特性包括多 LLM 评审一致性打分(最少两个评审,不提供单评审回退)、persona-scope 检测,默认用 SQLite 存储,作者称约 1 分钟即可完成设置。项目采用 AGPL-3.0 许可,另提供闭源商用的商业许可;附带 70+ 测试函数,并每六小时最多发送一次匿名启动遥测,可用 TELEMETRY_OPT_OUT=true 关闭。
推荐理由
作者给出的自托管 RAG 观测工具包含多评审一致性打分、人格范围检测和一行装饰器接入,并用表格对比了 Phoenix、Langfuse、TruLens 的差异。
来源:GitHub · 灵魂体仓库 · github.com