Hugging Face · 新模型:abliterated·· 11 天前AI 评分24
notfakerv 发布 LFM2.5-24B-A2B-abliterated 的 MLX 4-bit 量化版
notfakerv/LFM2.5-24B-A2B-abliterated-MLX-4bit
来源与原文
Hugging Face · 新模型:abliterated
发布时间:(北京时间)
阅读原始来源 · huggingface.co ↗完整链接与内容说明
https://huggingface.co/notfakerv/LFM2.5-24B-A2B-abliterated-MLX-4bit
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
notfakerv/LFM2.5-24B-A2B-abliterated-MLX-4bit 是 abliterated 版 LFM2.5-24B-A2B 的 MLX 4-bit affine 量化转换,权重 13.49 GB,直接由 BF16 检查点转换而非 GGUF 重量化,需 MLX LM >= 0.32.0 与 MLX >= 0.32.2。该模型为 always-thinking 推理模型,建议 24 GB 统一内存起步;验证限于冒烟与数值检查,未做 Apple Silicon 运行时测试或速度基准。
来源:Hugging Face · 新模型:abliterated · huggingface.co