GitHub · 灵魂体仓库·· 19 天前AI 评分50
LLM-gateway:连接 Groq 与 Gemini 的中间件网关开源项目
darshansapnar/LLM-gateway
来源与原文
GitHub · 灵魂体仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/darshansapnar/LLM-gateway
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
darshansapnar 开源了 LLM-gateway,一个位于应用与 AI 提供商(Groq、Gemini)之间的中间件服务器,支持精确与语义缓存、限流、提供商回退、流式输出和成本追踪,并附带 React 监控仪表盘。项目支持本地运行(需 Node.js、MongoDB 和带 RediSearch 模块的 Redis)及 Docker Compose 一键部署;API 密钥仅创建时显示一次,只存储哈希值。技术细节见仓库 CLAUDE.md。
来源:GitHub · 灵魂体仓库 · github.com