GitHub · 去对齐工具与仓库·· 8 天前精选AI 评分65
llamesh 开源：面向 llama.cpp 的 OpenAI 兼容网格代理
michaelkrauty/llamesh
来源与原文
GitHub · 去对齐工具与仓库
发布时间：（北京时间）
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/michaelkrauty/llamesh
本站目前仅有 AI 导读与摘要，未展示原文正文；技术细节、代码和完整结论请查看原始来源。
AI 导读
michaelkrauty 在 GitHub 发布 llamesh，一个面向 llama.cpp 的 OpenAI 兼容网格代理，可跨一台或多台机器管理 llama-server 实例的生成、驱逐、负载均衡与集群路由，对客户端暴露标准 OpenAI API。
推荐理由
原文给出完整的配置示例与功能清单，读者可以直接照着部署一个跨机器的 llama.cpp 集群代理。
来源：GitHub · 去对齐工具与仓库 · github.com