跳到正文
GitHub · 灵魂体仓库·· 20 天前AI 评分45

prompt-drift 开源工具:检测 LLM 提示词与评估测试之间的漂移

yunaremaia/prompt-drift

来源与原文

GitHub · 灵魂体仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/yunaremaia/prompt-drift

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

GitHub 开源工具 prompt-drift 通过文件名词干配对提示词与评估文件(如 prompts/summarizer.prompt 对应 evals/test_summarizer.py),检测提示词更新而评估滞后的漂移。工具用 Python 3.10+ 编写,可输出高严重级的 unEval'd_prompt、低级 orphan_eval、中级 orphan_prompt 等四类发现,支持终端与 --json 输出及 CI 退出码。尚未发布到 PyPI,需从仓库直接安装,语义比较和 SARIF 输出仍在路线图中。

来源:GitHub · 灵魂体仓库 · github.com