跳到正文
arXiv · cs.AI· Pablo Manrique·· 18 天前精选AI 评分56

SqueezeBench 发布:抗饱和的数学能力基准

SqueezeBench: Saturation-Resilient Evaluation of Mathematical Capability

来源与原文

arXiv · cs.AI

作者:Pablo Manrique

发布时间:(北京时间)

阅读原始来源 · arxiv.org ↗
完整链接与内容说明

https://arxiv.org/abs/2610.13461v1

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

Pablo Manrique 等在 arXiv 发布 SqueezeBench,一个抗饱和的数学能力基准,每题固定一个仅在小区间取值已知的整数函数 f(n),提交者用机器证明的 Lean 函数给出更优上下界记录,成功会抬高门槛而非移除题目。基准附带极值组合学十个问题和二十个初始记录,前沿模型代理每记录限 1 小时通过 82 次提交改进全部记录;两个更新模型接续又通过 60 次提交改进了 20 个记录中的 19 个。10 个问题中有 8 个仍至少有一个记录渐近落后于已发表最优界。

推荐理由

提出以记录递进式构造衡量数学能力,缓解基准饱和问题,并给出多代模型代理的实测数据。

来源:arXiv · cs.AI · arxiv.org