GitHub · 灵魂体仓库·· 20 天前AI 评分23
ModelBump:为 LLM 模型打造的 Dependabot,自动检测、测试并升级被退役的模型
imhammad/modelbump
来源与原文
GitHub · 灵魂体仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/imhammad/modelbump
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
ModelBump 是一个类似 Dependabot 的开源工具,可扫描代码中依赖的 LLM 模型 ID,在服务商退役模型前通过 CI 告警,并用统计检验对比新旧模型表现,自动修复回归的提示词并开启升级 PR。项目目前处于早期开发阶段(Phase 0),尚未可用。其立项依据是一项涵盖 17,703 个开源仓库、22,555 次迁移提交的研究:82% 的迁移发生在旧模型停用之后,94% 的应用硬编码了模型标识符,仅 4% 带有评估套件。
来源:GitHub · 灵魂体仓库 · github.com