GitHub · 3D 生成新仓库·· 9 天前AI 评分44
Giskard 开源 RAG 评测工具包 RAGET：自动生成测试集评估 LLM 应用
botextractai/ai-giskard-rag-evaluation
来源与原文
GitHub · 3D 生成新仓库
发布时间：（北京时间）
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/botextractai/ai-giskard-rag-evaluation
本站目前仅有 AI 导读与摘要，未展示原文正文；技术细节、代码和完整结论请查看原始来源。
AI 导读
Giskard 是一个开源 Python 评测框架，可自动检测 LLM 及 RAG 应用的性能、偏见和安全问题。其 RAG Evaluation Toolkit（RAGET）能从 RAG 知识库自动生成问题、参考答案和参考上下文组成的测试集，并对 Generator、Retriever、Rewriter、Router、Knowledge Base 各组件打分定位弱点。默认生成 6 种问题类型，示例基于 IPCC 气候报告用 gpt-4-turbo 构建 LlamaIndex 智能体并输出 HTML 评测报告。
来源：GitHub · 3D 生成新仓库 · github.com