跳到正文
GitHub · prompt 工程新仓库·· 10 天前AI 评分50

evals-demo:用纯 Python 为 LLM 功能搭建小型评测工具的实操工作坊

jars-demo/evals-demo

来源与原文

GitHub · prompt 工程新仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/jars-demo/evals-demo

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

一个约 70 分钟、共 7 章的 AI 工程实操工作坊,教你在纯 Python(仅标准库、无需 API key)中为 LLM 分诊功能构建小型评测框架,用数字而非主观感受对比不同 prompt 和模型。内置 16 条带预期结果的客服消息案例,支持接入任意 OpenAI 兼容端点(Groq、OpenAI、本地 Ollama),提供 run、compare、serve 命令及 --min-score 0.8 的 CI 门禁。项目 MIT 协议开源。

来源:GitHub · prompt 工程新仓库 · github.com