GitHub · 去对齐工具与仓库·· 7 天前AI 评分47
Model Arena 后端 API：用准确率、延迟与成本对比 LLM
sdas19/01-model-arena-api
来源与原文
GitHub · 去对齐工具与仓库
发布时间：（北京时间）
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/sdas19/01-model-arena-api
本站目前仅有 AI 导读与摘要，未展示原文正文；技术细节、代码和完整结论请查看原始来源。
AI 导读
Model Arena 的 Python 后端服务基于 FastAPI + LangChain，通过 Claude 与 OpenAI 模型在同一任务上对比准确率、TTFT/总延迟和单任务成本，结果存入 Supabase。模型 API 密钥仅存于该服务，仅 Supabase edge function 凭 x-service-token 可调用。evals.py 在 40 条工单测试集上评分，指标含准确率、payment_failed recall 及逐标签 recall/precision。
来源：GitHub · 去对齐工具与仓库 · github.com