GitHub · 去对齐工具与仓库·· 18 天前精选AI 评分59
开源工具 prompt-regress 把提示词当代码做回归测试并用 CI 门禁拦截
itsaayush77/-prompt-regress
来源与原文
GitHub · 去对齐工具与仓库
发布时间：（北京时间）
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/itsaayush77/-prompt-regress
本站目前仅有 AI 导读与摘要，未展示原文正文；技术细节、代码和完整结论请查看原始来源。
AI 导读
开发者 itsaayush77 发布开源工具 prompt-regress，用 YAML 定义测试用例跑模型并对比两次运行，找出提示词改动导致的输出退化。工具记录每条用例的通过率、成本与延迟，支持 OpenAI 兼容接口和本地 Ollama，CI 检测到回归时以 exit 1 拦截，无 API key 时可用 mock 模式离线运行。作者自述定位比 promptfoo 小，单一代码库，LLM-as-judge 等局限在文档中已列明。
推荐理由
原文完整给出了用例写法、CI 门禁和 mock 离线跑法，读者可以照着把提示词改动纳入回归测试。
来源：GitHub · 去对齐工具与仓库 · github.com