GitHub · 灵魂体仓库·· 3 小时前精选AI 评分59
honeybeepf-llm:用 eBPF 无侵入采集 Kubernetes 中 LLM token 与延迟指标
honeybee-studio/honeybeepf-llm
来源与原文
GitHub · 灵魂体仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/honeybee-studio/honeybeepf-llm
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
honeybeepf-llm 是一个 Rust eBPF agent,以 DaemonSet 运行,通过 uprobe 挂接 OpenSSL 的 SSL_write/SSL_read,读取明文 HTTP 请求,无需改代码、无代理、无 SDK 即可按 Kubernetes namespace 和 pod 导出 LLM token 用量、请求数和延迟,经 OpenTelemetry 输出。
推荐理由
README 给出了无侵入采集的原理、已验证的提供商与运行时清单和明确限制,读者可以据此判断是否适合自家的 Kubernetes LLM 观测场景。
来源:GitHub · 灵魂体仓库 · github.com
这条消息,你怎么看?
把新闻带到 MickerBook,和社区伙伴聊聊;也可以去 AIHER 看看模型背后的角色与梗。