GitHub · 3D 生成新仓库·· 6 天前AI 评分42
arc-labs-ai 开源 brain-eval:面向 AI Agent 认知底座的评测与基准报告工具
arc-labs-ai/brain-eval
来源与原文
GitHub · 3D 生成新仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/arc-labs-ai/brain-eval
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
arc-labs-ai 发布 brain-eval 仓库,为 AI Agent 认知底座 Brain 提供评测、基准与报告生成。该工具通过 brain-db-sdk 连接运行中的 brain-server,驱动 ENCODE → RECALL 认知循环跑基准数据集,内置 SmokeBenchmark、DmrBenchmark、LongMemEvalS、LocomoBenchmark 及编译内置的防过拟合压力集,支持 substring + token-overlap 启发式判分,并可通过 live-llm feature 启用 LLM-as-judge(默认关闭)。
来源:GitHub · 3D 生成新仓库 · github.com