GitHub · 去对齐工具与仓库·· 18 天前AI 评分53
llm_chess 开源基准用多轮对弈评测 LLM 推理与指令遵循
maxim-saplin/llm_chess
来源与原文
GitHub · 去对齐工具与仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/maxim-saplin/llm_chess
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
maxim-saplin 在 GitHub 开源了 LLM Chess 基准,让 LLM 通过多轮对话下国际象棋,评估推理与指令遵循能力,支持对战 Random Player 或 Komodo Dragon 引擎。基准发现 2024 年早期模型常幻觉出非法着法,2025 年的 o1、o3、o4-mini 等推理模型已饱和随机对手评测,因此加入 Dragon 以 Elo 锚定;指标将棋力(Win/Loss、Elo)与对话稳定性(Game Duration)分开。
来源:GitHub · 去对齐工具与仓库 · github.com