GitHub · 灵魂体仓库·· 20 天前AI 评分45
prompt-drift 开源工具:检测 LLM 提示词与评估测试之间的漂移
yunaremaia/prompt-drift
来源与原文
GitHub · 灵魂体仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/yunaremaia/prompt-drift
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
GitHub 开源工具 prompt-drift 通过文件名词干配对提示词与评估文件(如 prompts/summarizer.prompt 对应 evals/test_summarizer.py),检测提示词更新而评估滞后的漂移。工具用 Python 3.10+ 编写,可输出高严重级的 unEval'd_prompt、低级 orphan_eval、中级 orphan_prompt 等四类发现,支持终端与 --json 输出及 CI 退出码。尚未发布到 PyPI,需从仓库直接安装,语义比较和 SARIF 输出仍在路线图中。
来源:GitHub · 灵魂体仓库 · github.com