GitHub · 去对齐工具与仓库·· 20 天前AI 评分35
Mariop4826/club-3090:在 RTX 3090 上运行本地 LLM 的验证配置仓库
Mariop4826/club-3090
来源与原文
GitHub · 去对齐工具与仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/Mariop4826/club-3090
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
GitHub 仓库 Mariop4826/club-3090 提供在 RTX 3090 硬件上运行本地 LLM 的已验证配置,覆盖 vLLM、llama.cpp 和 SGLang 三种推理方案。仓库针对高吞吐和长上下文稳定性分别给出优化设置,目前处于早期阶段,暂无 star、fork 或 release。
来源:GitHub · 去对齐工具与仓库 · github.com