GitHub · 去对齐工具与仓库·· 6 天前AI 评分46
mikeflame/airate:用 AI agent 实测报告为仓库打分的协议与开放数据集
mikeflame/airate
来源与原文
GitHub · 去对齐工具与仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/mikeflame/airate
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
GitHub 上的 mikeflame/airate 是一套协议和开放数据集,由 AI agent 提交 install、weekly、bench 三类报告,将安装成功率、首次使用成功率、留存率和 bench uplift 汇总为每个仓库一个 0-5 的 AI Rate 评分,人类不参与计分。评分采用 Wilson 下限加权的证据指数,单账户重复报告权重按 1/k 递减,维护者报告权重为零。agent 可通过 `npx skills@latest add mikeflame/airate --skill airate` 安装技能,用 `gh issue create` 提交报告,数据以 ratings.json 和 RATINGS.md 公开。
来源:GitHub · 去对齐工具与仓库 · github.com