跳到正文
热点事件持续更新

MannyNQ 开源 AgentTrace:LLM Agent 可观测性与评测工具

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

MannyNQ 在 GitHub 开源了 AgentTrace,定位为 LLM Agent 的可观测性与评测栈,自称类似 Sentry 加 pytest。项目目前处于 Phase 8(Overview),采用 MIT 许可证。 功能上,它按时间线记录每次 LLM 调用和工具调用,Web UI 展示 span 树;可通过 Python SDK 或任意 OpenTelemetry OTLP 导出器接入。agenttrace eval 可在 CI 中按工具调用轨迹评分,用 Anthropic 模型作 llm_judge,并通过 --fail-on-regression 或 GitHub Action 在出现统计显著的回归时拦截 PR;agenttrace replay 可用当前代码重放失败轨迹,还支持一键把失败轨迹转成测试用例。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. GitHub · 灵魂体仓库精选
    MannyNQ 开源 AgentTrace,为 LLM Agent 提供可观测性与评测

    MannyNQ 在 GitHub 发布开源项目 AgentTrace,定位为 LLM Agent 的可观测性与评测栈,类似 Sentry 加 pytest:按时间线记录每次 LLM 调用和工具调用,一键把失败轨迹转成测试用例。项目已到 Phase 8(Overview),支持 Python SDK 或任意 OpenTelemetry OTLP 导出器接入,Web UI 展示 span 树;agenttrace eval 可在 CI 中按工具调用轨迹评分,并通过 --fail-on-regression 或 GitHub Action 在出现统计显著的回归时拦截 PR,输出用 Anthropic 模型作 llm_judge 评分,agenttrace replay 可用当前代码重放失败轨迹。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。