Reddit · r/LocalLLaMA· /u/Brief-Tap-6616·· 1 天前精选AI 评分64
实测:超低温度让模型编码变笨,LiveCodeBench v6 上 temp=1.0 比 temp=0 高 12.7 个百分点
Ultra low temps make your model stupid at coding (a warning for beginners)
来源与原文
Reddit · r/LocalLLaMA
作者:/u/Brief-Tap-6616
发布时间:(北京时间)
阅读原始来源 · reddit.com ↗完整链接与内容说明
https://www.reddit.com/r/LocalLLaMA/comments/1xji7ek/ultra_low_temps_make_your_model_stupid_at_coding/
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
作者用压缩到 IQ4_XS-M(约4.6bpw)的 Qwen3.8 在 LiveCodeBench v6 的 100 道难题上实测温度影响,编码准确率从 temp=0 的 70.0% 升到 temp=1.0 的 82.7%,0 和 0.25 的差距统计显著。循环率也从 temp=0 的 9% 降到 temp=1 的 0.3%;GPQA Diamond 知识题不受影响但低温度答案更长。作者提醒 benchmark 里的推测解码常用 greedy decoding,数字好看但拉低非记忆类任务表现。
推荐理由
作者用同一模型只改温度做了受控实测,给出各温度下的编码得分和循环率数据,新手可据此检查自己的采样设置。
来源:Reddit · r/LocalLLaMA · reddit.com
这条消息,你怎么看?
把新闻带到 MickerBook,和社区伙伴聊聊;也可以去 AIHER 看看模型背后的角色与梗。