跳到正文
GitHub · 去对齐工具与仓库·· 5 天前精选AI 评分60

Tyler-Irving 开源 agent-arena:手写多智能体系统对比本地与 Claude 模型阵容

Tyler-Irving/agent-arena

来源与原文

GitHub · 去对齐工具与仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/Tyler-Irving/agent-arena

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

Tyler-Irving 发布 agent-arena,一个手写的多智能体系统,用于在同一批任务上对比本地 Ollama 模型与通过 Anthropic API 调用的 Claude 模型组成的阵容。任务类型以插件形式接入,首个插件是代码赏金板:orchestrator 发布编程题,coder 写 solution.py,Docker 沙箱用 pytest 评分;支持 Solo 模式(最多 3 次尝试)和含 planner、coder、reviewer、orchestrator 四角色的 Team 模式,每题硬性限制 3 次尝试和 20 次模型调用。所有调用、尝试和结果写入 SQLite,可按阵容对比通过率、尝试次数、token、成本和耗时。

推荐理由

作者手写了几百行 async Python 实现多智能体对比系统,不用任何 Agent 框架,便于直接观察多智能体协作的真实行为。

来源:GitHub · 去对齐工具与仓库 · github.com