arXiv · cs.AI· Fengrui Zhang·· 15 小时前AI 评分45
DECE:面向 LLM 智能体的多款 Eurogame 统一竞技场
A Unified Arena for LLM Agents across Diverse Eurogame
来源与原文
arXiv · cs.AI
作者:Fengrui Zhang
发布时间:(北京时间)
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.35773v1
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
研究者推出 DECE(Diverse Eurogame Competitive Environments),一个涵盖十款 Eurogame 的 LLM 智能体统一评测竞技场,共享接口与评测协议。主要研究评测了 12 种 model-harness 配置(9 个模型、4 种执行 harness),共进行 480 场三人对局,主研究与补充研究合计 1,032 场对局。结果显示跨游戏排名大体一致但也存在游戏特定优势,同一模型在不同 harness 下表现不同,且性能优势并不总伴随更好的 token 与成本效率。
来源:arXiv · cs.AI · arxiv.org