跳到正文
GitHub · 去对齐工具与仓库·· 20 天前精选AI 评分66

Chris0Jeky 开源 llm-release-gate:在 PR 阶段拦截 LLM 应用回归改动

Chris0Jeky/llm-release-gate

来源与原文

GitHub · 去对齐工具与仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/Chris0Jeky/llm-release-gate

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

Chris0Jeky 发布开源 CLI 与 GitHub Action llm-release-gate,将基线与候选 LLM 应用配置在版本化 golden/replay 数据集上对比质量、弃答、引用、schema、延迟、token 与成本指标,超阈值即在 PR 上报告并使检查失败。

推荐理由

开源 CLI 与 GitHub Action,在 PR 阶段对 prompt、模型或检索改动跑回归评测并按阈值拦截,附离线演示与指标定义。

来源:GitHub · 去对齐工具与仓库 · github.com