Joe Hughes 开源 first-eval 教程:测试 Claude 写 Claude API 代码
热点事件观察中
Joe Hughes 开源 first-eval 教程:测试 Claude 写 Claude API 代码
1 篇报道1 个报道来源2 天前更新
先了解这件事
AI 综述
Joe Hughes 发布独立开源项目 first-eval(JoeBHughes/first-eval),通过 6 步教程教用户构建一个小型评测,用固定规则脚本给 Claude 模型编写 Claude API 代码的回答评分并比较两次运行。项目声明为独立项目,与 Anthropic 无关也未获其认可;脚本默认拒绝超过 40 次调用,除非加 --yes 参数。教程无需 API key 即可试跑。 项目源于一次对 240 个 Claude 回答的审计:自动化脚本发现 114 个未联网回答中有 108 个(95%)引用了 Models API 已不列出的旧模型 ID。
AI 根据报道生成 · 19 小时前更新
最新进展11月21日 12:38
first-eval:一个测试 Claude 模型编写 Claude API 代码的入门评测教程报道时间线
沿着报道,了解事件的不同侧面。
11月21日
- GitHub · 去对齐工具与仓库first-eval:一个测试 Claude 模型编写 Claude API 代码的入门评测教程
Joe Hughes 发布独立开源项目 first-eval,教用户构建一个小型 eval,测试 Claude 模型编写 Claude API 代码的质量。教程分 6 步,用固定规则脚本评分,无需 API key 即可试跑。项目源于一次对 240 个 Claude 回答的审计:自动化脚本发现 114 个未联网回答中 108 个(95%)引用了 Models API 已不列出的旧模型 ID。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。