Hugging Face · 新模型:uncensored·· 16 天前AI 评分42
darask0 发布 GLM-5.3-Flash-Uncensored 的 IQ2/IQ3 优化量化版
darask0/GLM-5.3-Flash-Uncensored-IQ2-IQ3-Optimized
来源与原文
Hugging Face · 新模型:uncensored
发布时间:(北京时间)
阅读原始来源 · huggingface.co ↗完整链接与内容说明
https://huggingface.co/darask0/GLM-5.3-Flash-Uncensored-IQ2-IQ3-Optimized
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
darask0 在 Hugging Face 发布 GLM-5.3-Flash-Uncensored 的 IQ2/IQ3 混合量化版,基于 orcarouter 的 FP8 源模型转换,两个 GGUF 分片共 83.707 GiB。该版本保留全部 45 层文本主干和 42 个路由层中的 288 个专家,采用校准和 GPTQ 误差反馈,路由专家主要用 IQ2_XXS、重要下投影用 IQ3_XXS。在 RTX PRO 6000 96 GB 上实测 256 输入时 decode 91.0 tokens/s,需自建补丁版 Maya 运行时,与原版 llama.cpp、LM Studio、Ollama 的兼容性未经验证。
来源:Hugging Face · 新模型:uncensored · huggingface.co