GitHub · prompt 工程新仓库·· 10 天前AI 评分50
evals-demo:用纯 Python 为 LLM 功能搭建小型评测工具的实操工作坊
jars-demo/evals-demo
来源与原文
GitHub · prompt 工程新仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/jars-demo/evals-demo
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
一个约 70 分钟、共 7 章的 AI 工程实操工作坊,教你在纯 Python(仅标准库、无需 API key)中为 LLM 分诊功能构建小型评测框架,用数字而非主观感受对比不同 prompt 和模型。内置 16 条带预期结果的客服消息案例,支持接入任意 OpenAI 兼容端点(Groq、OpenAI、本地 Ollama),提供 run、compare、serve 命令及 --min-score 0.8 的 CI 门禁。项目 MIT 协议开源。
来源:GitHub · prompt 工程新仓库 · github.com