跳到正文
GitHub · 灵魂体仓库·· 19 天前精选AI 评分57

Explicit Edit 基准发布:226 个字节级精确任务评测 coding agent 的文件编辑准确率

alexshpunt/explicit-edit-benchmark

来源与原文

GitHub · 灵魂体仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/alexshpunt/explicit-edit-benchmark

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

alexshpunt 在 GitHub 发布开源基准 Explicit Edit,用 226 个确定性、字节级精确的任务衡量 coding agent 和 harness 的文件编辑准确率。任务故意做小,不含深度推理或领域知识,覆盖替换、插入、删除、移动、大文件、多文件类型和 Unicode 边界情况,由校验器逐字节比对结果。

推荐理由

这个基准用字节级精确校验把编辑准确率和推理能力分开测,读者可以按同一任务集横向对比不同 agent CLI 和 harness。

来源:GitHub · 灵魂体仓库 · github.com