跳到正文
Hugging Face · 新模型:uncensored·· 7 天前精选AI 评分58

Qwen3.8-Flash-Next-Uncensored NVFP4 版发布,可在单块 96 GB Blackwell 上部署

sysop1122/Qwen3.8-Flash-Next-Uncensored-NVFP4

来源与原文

Hugging Face · 新模型:uncensored

发布时间:(北京时间)

阅读原始来源 · huggingface.co ↗
完整链接与内容说明

https://huggingface.co/sysop1122/Qwen3.8-Flash-Next-Uncensored-NVFP4

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

sysop1122 在 Hugging Face 发布 Qwen3.8-Flash-Next-Uncensored 的 NVFP4 量化版,将 OrcaRouter 的消融 BF16 权重按 Primitive 的 experts-only RTN 方案打包,路由专家为 NVFP4 group 16,51B PLE n-gram 表保持 BF16 以支持 VLLM_PLE_CPU_OFFLOAD。消融沿用 Arditi et al. (2024) 的拒绝方向移除,仅编辑 149 个残差写入张量,未改动视觉塔、MoE 路由和 gate_up_proj;该版本未重跑 AdvBench/HarmBench 评分,仅做了文本、视觉 OCR 和工具调用解析的抽查。

推荐理由

模型卡给出了消融编辑的具体张量清单和 DGX Spark 实测吞吐数据,读者可据此判断去对齐程度与单卡部署成本。

来源:Hugging Face · 新模型:uncensored · huggingface.co