Hugging Face · 新模型:abliterated·· 16 天前精选AI 评分61
msuiche 发布 gemma-4-12B-it 免权重去拒绝控制向量 GLP-33-L15-47-a0.5
msuiche/gemma-4-12B-it-abliterated-GLP-33-L15-47-a0.5
来源与原文
Hugging Face · 新模型:abliterated
发布时间:(北京时间)
阅读原始来源 · huggingface.co ↗完整链接与内容说明
https://huggingface.co/msuiche/gemma-4-12B-it-abliterated-GLP-33-L15-47-a0.5
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
Matt Suiche 在 Hugging Face 发布针对 google/gemma-4-12B-it 的免权重投影控制向量,在运行时于第 15–47 层残差流后施加 h <- h - 0.5*(h·d)d,不修改任何权重。验证显示 stock 模型在 refusal32 上本就 32/32 配合,alpha=0.5 时 32/32 且零乱码输出,alpha=0.25 反而降到 29/32,阶梯呈非单调;发行 alpha 定为 0.5,仅绑定 revision 707f0a3 的该 checkpoint,需本地权重与实现 glp.mode=project 的运行时。
推荐理由
原文完整给出控制向量的推导门限与拒绝率实测,还指出基座模型本身已全数配合,读者可借此理解半程转向反而更差的现象。
来源:Hugging Face · 新模型:abliterated · huggingface.co