arXiv · cs.AI· Yuannuo Feng·· 5 天前AI 评分47
SetCommit:面向少步扩散语言模型解码的协同 token 提交方法
SetCommit: Coordinated Token Commitments for Few-Step Diffusion Language Model Decoding
来源与原文
arXiv · cs.AI
作者:Yuannuo Feng
发布时间:(北京时间)
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.31120v1
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
SetCommit 是一种免训练的协同并行 token 提交方法,通过平衡 token 可靠性与局部联合提交风险来选择提交集合,并执行预算中性的局部交换以替换脆弱的早期提交。在 LLaDA-8B 和 Dream-7B 上的 GSM8K、MATH-500、MBPP、HumanEval 实验显示,32 次模型评估下准确率/pass@1 较原生解码最高提升 7.4 个百分点,几何平均增量加速比为 1.44 至 1.74×,代码已开源。
来源:arXiv · cs.AI · arxiv.org