GitHub · 去对齐工具与仓库·· 20 天前精选AI 评分66
Chris0Jeky 开源 llm-release-gate:在 PR 阶段拦截 LLM 应用回归改动
Chris0Jeky/llm-release-gate
来源与原文
GitHub · 去对齐工具与仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/Chris0Jeky/llm-release-gate
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
Chris0Jeky 发布开源 CLI 与 GitHub Action llm-release-gate,将基线与候选 LLM 应用配置在版本化 golden/replay 数据集上对比质量、弃答、引用、schema、延迟、token 与成本指标,超阈值即在 PR 上报告并使检查失败。
推荐理由
开源 CLI 与 GitHub Action,在 PR 阶段对 prompt、模型或检索改动跑回归评测并按阈值拦截,附离线演示与指标定义。
来源:GitHub · 去对齐工具与仓库 · github.com