跳到正文
热点事件观察中

Joe Hughes 开源 first-eval 教程:测试 Claude 写 Claude API 代码

1 篇报道1 个报道来源2 天前更新

先了解这件事

AI 综述

Joe Hughes 发布独立开源项目 first-eval(JoeBHughes/first-eval),通过 6 步教程教用户构建一个小型评测,用固定规则脚本给 Claude 模型编写 Claude API 代码的回答评分并比较两次运行。项目声明为独立项目,与 Anthropic 无关也未获其认可;脚本默认拒绝超过 40 次调用,除非加 --yes 参数。教程无需 API key 即可试跑。 项目源于一次对 240 个 Claude 回答的审计:自动化脚本发现 114 个未联网回答中有 108 个(95%)引用了 Models API 已不列出的旧模型 ID。

AI 根据报道生成 · 19 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月21日
  1. GitHub · 去对齐工具与仓库
    first-eval:一个测试 Claude 模型编写 Claude API 代码的入门评测教程

    Joe Hughes 发布独立开源项目 first-eval,教用户构建一个小型 eval,测试 Claude 模型编写 Claude API 代码的质量。教程分 6 步,用固定规则脚本评分,无需 API key 即可试跑。项目源于一次对 240 个 Claude 回答的审计:自动化脚本发现 114 个未联网回答中 108 个(95%)引用了 Models API 已不列出的旧模型 ID。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。