跳到正文
GitHub · 灵魂体仓库·· 20 天前AI 评分23

ModelBump:为 LLM 模型打造的 Dependabot,自动检测、测试并升级被退役的模型

imhammad/modelbump

来源与原文

GitHub · 灵魂体仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/imhammad/modelbump

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

ModelBump 是一个类似 Dependabot 的开源工具,可扫描代码中依赖的 LLM 模型 ID,在服务商退役模型前通过 CI 告警,并用统计检验对比新旧模型表现,自动修复回归的提示词并开启升级 PR。项目目前处于早期开发阶段(Phase 0),尚未可用。其立项依据是一项涵盖 17,703 个开源仓库、22,555 次迁移提交的研究:82% 的迁移发生在旧模型停用之后,94% 的应用硬编码了模型标识符,仅 4% 带有评估套件。

来源:GitHub · 灵魂体仓库 · github.com