跳到正文
GitHub · 去对齐工具与仓库·· 20 天前精选AI 评分59

LightTrack v0.0.7 开源:自托管 LLM 可观测与评分工具

xkazm04/lighttrack

来源与原文

GitHub · 去对齐工具与仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/xkazm04/lighttrack

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

xkazm04 在 GitHub 发布 LightTrack v0.0.7,一个轻量自托管的 LLM 可观测与评分工具,定位为 headless 优先、数据开放的 Langfuse 替代品。它通过 Python/TypeScript/Rust SDK 追踪 OpenAI、Anthropic、Gemini 的调用,基于数据库价格表核算每次调用的成本,支持按客户/产品计算利润率、按项目设置成本与 token 限额并触发告警;评分引擎默认用 Claude Code headless(claude -p)作为可插拔的 LLM-as-judge,支持带权重维度和门槛的 rubric。

推荐理由

作者开源了自托管的 LLM 可观测与评分工具,成本核算、限额告警和基于 rubric 的 LLM-as-judge 评分都可直接复用。

来源:GitHub · 去对齐工具与仓库 · github.com