跳到正文
热点事件持续更新

用户实测Recursive的MoE模型Flint在低配环境下运行情况

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

Reddit r/LocalLLaMA 用户 /u/xdcfret1 发帖分享对 Recursive 的 MoE 编码模型 Flint 的本地部署体验:该模型总参数 39.8B、每 token 激活约 2.5B。在其 32 GB VRAM 加 32 GB RAM 的环境下,用 llama.cpp 将专家卸载到 CPU 后能以 Q8 量化运行 Flint;同为 27B 的 Qwen 3.8 只能跑 Q6。两者速度均约 40 token/秒,Flint 快 1-2 token/秒。发帖者同时在社区征求意见。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月29日
  1. Reddit · r/LocalLLaMA
    Recursive 的 MoE 编码模型 Flint 引发 LocalLLaMA 社区讨论

    Reddit r/LocalLLaMA 用户分享对 Recursive 的 MoE 编码模型 Flint 的体验:总参数 39.8B、每 token 激活约 2.5B。在 32 GB VRAM + 32 GB RAM 环境下,llama.cpp 可将专家卸载到 CPU 后以 Q8 运行 Flint,而 Qwen 3.8 27B 只能跑 Q6,两者速度均约 40 t/s,Flint 快 1-2 token/秒。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。