跳到正文
GitHub · 灵魂体仓库·· 19 天前AI 评分50

LLM-gateway:连接 Groq 与 Gemini 的中间件网关开源项目

darshansapnar/LLM-gateway

来源与原文

GitHub · 灵魂体仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/darshansapnar/LLM-gateway

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

darshansapnar 开源了 LLM-gateway,一个位于应用与 AI 提供商(Groq、Gemini)之间的中间件服务器,支持精确与语义缓存、限流、提供商回退、流式输出和成本追踪,并附带 React 监控仪表盘。项目支持本地运行(需 Node.js、MongoDB 和带 RediSearch 模块的 Redis)及 Docker Compose 一键部署;API 密钥仅创建时显示一次,只存储哈希值。技术细节见仓库 CLAUDE.md。

来源:GitHub · 灵魂体仓库 · github.com