GitHub · 灵魂体仓库·· 2 小时前精选AI 评分57
MannyNQ 开源 AgentTrace，为 LLM Agent 提供可观测性与评测
MannyNQ/AgentTrace
来源与原文
GitHub · 灵魂体仓库
发布时间：（北京时间）
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/MannyNQ/AgentTrace
本站目前仅有 AI 导读与摘要，未展示原文正文；技术细节、代码和完整结论请查看原始来源。
AI 导读
MannyNQ 在 GitHub 发布开源项目 AgentTrace，定位为 LLM Agent 的可观测性与评测栈，类似 Sentry 加 pytest：按时间线记录每次 LLM 调用和工具调用，一键把失败轨迹转成测试用例。项目已到 Phase 8（Overview），支持 Python SDK 或任意 OpenTelemetry OTLP 导出器接入，Web UI 展示 span 树；agenttrace eval 可在 CI 中按工具调用轨迹评分，并通过 --fail-on-regression 或 GitHub Action 在出现统计显著的回归时拦截 PR，输出用 Anthropic 模型作 llm_judge 评分，agenttrace replay 可用当前代码重放失败轨迹。
推荐理由
原文把链路追踪、数据集评测和 CI 回归拦截串成一个完整闭环，对做 LLM Agent 工程的人有直接可复用的部署与评测方法。
来源：GitHub · 灵魂体仓库 · github.com