面向非洲语言安全的大语言模型对齐研究:以 Hausa 语为例
研究者发布 HausaSafeLM,这是首批 Hausa 语安全偏好数据集之一,基于 PKU-SafeRLHF 的 10,000 条提示词,含 3,000 条人工校对(gold)和 7,000 条机器翻译(silver)样本,覆盖六大危害类别。基于 Qwen2.5-7B-Instruct 在 500 条有害和 200 条良性 Hausa 评测上对比 SFT 与 SFT+DPO,发现仅看拒绝率会让未调优基座模型显得很安全,实则源于 Hausa 生成能力弱而非真正对齐。SFT 同时提升拒绝流畅度与精度且受益于更大的 silver 数据,DPO 提升拒绝精度但严重损害语言质量,现有对齐技术更易教会模型何时拒绝,而非如何在低资源语言中流畅拒绝。