跳到正文
GitHub · 去对齐工具与仓库·· 20 天前精选AI 评分61

Trimwares Trace 发布本地 LLM 成本追踪工具,按六类归因拆分每次调用开销

TTHBfo2/trace-free

来源与原文

GitHub · 去对齐工具与仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/TTHBfo2/trace-free

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

Trimwares 发布开源工具 Trace,将每次 LLM 调用拆成系统提示词、工具 schema、RAG、对话历史、用户查询和输出 token 六类成本归因,全部在本机进程内拦截,无代理、无云端、不上传提示词文本,日志仅写入 .trimwares/session.jsonl。

推荐理由

原文给出了六类成本归因、各优化项的典型节省比例和与 Portkey、Helicone 的对比表,可据此评估是否适合本地化 LLM 成本追踪。

来源:GitHub · 去对齐工具与仓库 · github.com