跳到正文
热点事件观察中

研究者发布RetroChessBench倒推国际象棋评测基准

1 篇报道1 个报道来源1 天前更新

先了解这件事

AI 综述

Tidor-Vlad Pricope 在 arXiv 提交论文,发布 RetroChessBench——一个包含 12 项任务的倒推国际象棋评测基准,覆盖定长构造、唯一结局和穷举答案集,附带参考答案、评分细则与终端奖励环境。 测试结果显示,GPT 6 Astra High 在每任务两次试验中,无工具时 22/24 次无法给出所需最终答案,启用代码执行后仍有 18/24 次失败,平均终端 RL 奖励分别为 14.75% 和 27.19%。作者认为网络训练数据缺少此类推导解释,质疑前沿数学推理能否真正泛化。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月29日
  1. arXiv · cs.AI
    RetroChessBench:一个用于重构与证明国际象棋历史的基准

    研究者推出 RetroChessBench,一个包含 12 项任务的倒推国际象棋基准,覆盖定长构造、唯一结局和穷举答案集,附带参考答案、评分细则与终端奖励环境。在每任务两次试验中,GPT 6 Astra High 无工具时 22/24 次无法给出所需最终答案,启用代码执行后仍有 18/24 次失败,平均终端 RL 奖励分别为 14.75% 和 27.19%。作者认为网络训练数据缺少此类推导解释,质疑前沿数学推理能否真正泛化。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。