跳到正文
arXiv · cs.AI· Fengrui Zhang·· 15 小时前AI 评分45

DECE:面向 LLM 智能体的多款 Eurogame 统一竞技场

A Unified Arena for LLM Agents across Diverse Eurogame

来源与原文

arXiv · cs.AI

作者:Fengrui Zhang

发布时间:(北京时间)

阅读原始来源 · arxiv.org ↗
完整链接与内容说明

https://arxiv.org/abs/2610.35773v1

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

研究者推出 DECE(Diverse Eurogame Competitive Environments),一个涵盖十款 Eurogame 的 LLM 智能体统一评测竞技场,共享接口与评测协议。主要研究评测了 12 种 model-harness 配置(9 个模型、4 种执行 harness),共进行 480 场三人对局,主研究与补充研究合计 1,032 场对局。结果显示跨游戏排名大体一致但也存在游戏特定优势,同一模型在不同 harness 下表现不同,且性能优势并不总伴随更好的 token 与成本效率。

来源:arXiv · cs.AI · arxiv.org