GitHub · 去对齐工具与仓库·· 15 天前AI 评分40
LookingForErrors 开源 agent-improvement-lab:AI 助手失败分析与改进对比研究原型
LookingForErrors/agent-improvement-lab
来源与原文
GitHub · 去对齐工具与仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/LookingForErrors/agent-improvement-lab
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
LookingForErrors 发布 agent-improvement-lab,一个用于发现 AI 助手失败、选定具体改动并对比版本的研究原型,以评测可靠性优先。项目内置 252 个任务对、分属 84 个家族,演示中 Synthetic replay 从 58.7% 提升到 86.5%;支持导入 JSON/JSONL、六种内置或自定义评测标准,架构由 Python、LangGraph 与 Inspect 分层负责轨迹校验、结果审查与对照实验。
来源:GitHub · 去对齐工具与仓库 · github.com