跳到正文
GitHub · 灵魂体仓库·· 3 天前精选AI 评分57

llm-contract:TypeScript 开源的 LLM 行为契约测试库与 CLI 发布

alivirgo/LLM-Contract

来源与原文

GitHub · 灵魂体仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/alivirgo/LLM-Contract

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

作者发布了开源 TypeScript 库和 CLI 工具 llm-contract,用于确定性优先的 LLM 评测、Agent 测试、提示词回归、RAG 事实核查、结构化输出校验和 CI 门槛控制。工具按归一化、语法、结构、语义、事实保持、行为约束六层校验流水线输出可检查报告,支持 Zod / Valibot / JSON Schema 子集,可对比基线检测回归与 flaky 用例,设置最低通过率等 CI 政策,不依赖特定模型厂商、无隐藏网络调用,MIT 协议发布于 GitHub。

推荐理由

作者把确定性校验、RAG 事实核查和 CI 门槛组合成完整工作流,读者可以直接搬走这套 LLM 回归测试做法。

来源:GitHub · 灵魂体仓库 · github.com