arXiv · cs.AI· Sizhe Chen·· 20 小时前精选AI 评分57
arXiv 论文提出用目标冲突样例改进 LLM 指令层级
Improving Instruction Hierarchy by Learning from Goal-Goal Conflicts
来源与原文
arXiv · cs.AI
作者：Sizhe Chen
发布时间：（北京时间）
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.35093v1
本站目前仅有 AI 导读与摘要，未展示原文正文；技术细节、代码和完整结论请查看原始来源。
AI 导读
arXiv 论文（arXiv:2610.35093）指出指令层级（IH）训练中存在一类被 OpenAI 和 NVIDIA 现有训练集遗漏的冲突类型，即目标与目标之间的冲突。作者将任务分解为目标和约束后发现这一缺口，并在 Qwen3.5-9B 与 Gemma4-12B-it 上微调该类冲突样例，显著提升训练未见真实任务上的指令层级表现；将其加入现有 IH 训练集也能提高 adherence，且在八个基准的无冲突任务上平均效用变化很小。
推荐理由
论文指出 OpenAI 和 NVIDIA 的指令层级训练集缺少目标冲突这一类型，并用微调实验给出可复用的补法。
来源：arXiv · cs.AI · arxiv.org