跳到正文
AIHOT · 精选· noreply@aihot.news (公众号:面壁智能)·· 7 天前AI 评分47

面壁智能解析前瞻专家调度 LES 如何让 35B MoE 在手机端侧实时无损运行

来源与原文

AIHOT · 精选

作者:noreply@aihot.news (公众号:面壁智能)

发布时间:(北京时间)

阅读原始来源 · aihot.news ↗
完整链接与内容说明

https://aihot.news/items/m2ylwtzb8x49c32spfl1wplqz

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

面壁智能 MiniCPM-V 团队介绍了支撑 MiniCPM-V 4.7 端侧运行的前瞻专家调度(LES)技术。该团队称 LES 首次实现 35B-A3B 规模 MoE 在端侧实时无损运行,iPhone 18 Pro Max 实测解码速度超过 20 token/s。

来源:AIHOT · 精选 · aihot.news