跳到正文
Hugging Face · 新模型:abliterated·· 4 小时前AI 评分46

Qwen2.5-1.5B-Abliterated-2.0:基于 unsloth/Qwen2.5-1.5B-Instruct 的去拒绝化模型上架 Hugging Face

AmareshHebbar/Qwen2.5-1.5B-Abliterated-2.0

来源与原文

Hugging Face · 新模型:abliterated

发布时间:(北京时间)

阅读原始来源 · huggingface.co ↗
完整链接与内容说明

https://huggingface.co/AmareshHebbar/Qwen2.5-1.5B-Abliterated-2.0

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

AmareshHebbar 在 Hugging Face 发布 Qwen2.5-1.5B-Abliterated-Clean,基于 unsloth/Qwen2.5-1.5B-Instruct,用 Winsorized Gram-Schmidt 正交投影对第 10-24 层权重做定向手术以移除拒绝行为。硬拒绝率从 94.5% 降至 2.1%,困惑度低于 25,MMLU Abstract Algebra 0-shot 得分 37%、GSM8K 28%,以 bfloat16/float16 合并 16 位格式提供。

来源:Hugging Face · 新模型:abliterated · huggingface.co