跳到正文
GitHub · 灵魂体仓库·· 20 天前精选AI 评分55

pravynraj 开源 PromptArena:提示词版本对比与评测工具

pravynraj/PromptArena

来源与原文

GitHub · 灵魂体仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/pravynraj/PromptArena

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

pravynraj 在 GitHub 发布 PromptArena,用于对同一任务的多版提示词做对比实验,按质量、延迟、token 用量和成本选出最佳提示词。支持 zero-shot、few-shot、chain-of-thought、role-based、structured JSON output 五种技巧,自动评分含 contains/exact/similarity/JSON 有效性;LLM 层可接 Anthropic API、本地 Ollama 或离线 mock,技术栈为 FastAPI、SQLite、vanilla JS 和 Docker,可本地或 docker compose 运行。

推荐理由

这是一个可直接本地运行的提示词对比实验工具,覆盖版本管理、五种技巧、自动评分与成本延迟指标,方法可迁移到日常提示词选型。

来源:GitHub · 灵魂体仓库 · github.com