跳到正文
Reddit · r/LocalLLaMA· /u/9kSs·· 2 天前AI 评分10

在 M4 Pro 48GB 上运行 Qwen3.8 27B 的最佳方案是什么?

Best way to run Qwen3.8 27B on M4 Pro 48gb?

来源与原文

Reddit · r/LocalLLaMA

作者:/u/9kSs

发布时间:(北京时间)

阅读原始来源 · reddit.com ↗
完整链接与内容说明

https://www.reddit.com/r/LocalLLaMA/comments/1xevqqs/best_way_to_run_qwen38_27b_on_m4_pro_48gb/

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

一位用户在 r/LocalLLaMA 求助如何在 M4 Pro 48GB Mac 上以最佳方式本地运行 Qwen3.8 27B,希望在 tokens/s、首 token 延迟、上下文长度与留出其他任务资源之间取得平衡,并要求速度不低于 10 tps。帖子提到社区对 MTP、MLX 和量化方案看法不一。

来源:Reddit · r/LocalLLaMA · reddit.com