跳到正文
GitHub · 3D 生成新仓库·· 6 天前AI 评分42

arc-labs-ai 开源 brain-eval:面向 AI Agent 认知底座的评测与基准报告工具

arc-labs-ai/brain-eval

来源与原文

GitHub · 3D 生成新仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/arc-labs-ai/brain-eval

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

arc-labs-ai 发布 brain-eval 仓库,为 AI Agent 认知底座 Brain 提供评测、基准与报告生成。该工具通过 brain-db-sdk 连接运行中的 brain-server,驱动 ENCODE → RECALL 认知循环跑基准数据集,内置 SmokeBenchmark、DmrBenchmark、LongMemEvalS、LocomoBenchmark 及编译内置的防过拟合压力集,支持 substring + token-overlap 启发式判分,并可通过 live-llm feature 启用 LLM-as-judge(默认关闭)。

来源:GitHub · 3D 生成新仓库 · github.com