RyanBalech 开源 llm-agent-evaluation:仓库级 LLM 智能体评估研究框架
RyanBalech 在 GitHub 发布 llm-agent-evaluation,一个研究仓库级检索与结构化工具使用如何影响软件工程智能体的框架。已实现 BM25 基线、Recall@k/MRR/nDCG 指标、上下文预算核算、PyTorch Transformer 稠密检索及 SWE-bench 补丁标签适配器,补丁生成与 agent 消融仍在规划中,尚无正式 benchmark 结果。