开源 LLM-as-judge 评测工具包 JudgeKit 发布
热点事件持续更新
开源 LLM-as-judge 评测工具包 JudgeKit 发布
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
开发者在 GitHub 开源了 LLM-as-judge 评测工具包 JudgeKit（仓库 SaiCharan85/JudgeKit），当前版本 v0.2.0，采用 MIT 许可。该工具包面向领域无关的模型评审评测，包含 YAML 评分标准、多评委面板、植入错误评测、Cohen's kappa 校准以及位置、冗长、礼貌等偏差测试，v0.2.0 已支持 1-5 分制打分评审与证据引文验证。
AI 根据报道生成 · 2 小时前更新
最新进展10月29日 14:37
JudgeKit 开源：领域无关的 LLM-as-judge 评测工具包报道时间线
沿着报道，了解事件的不同侧面。
10月29日
- GitHub · 3D 生成新仓库JudgeKit 开源：领域无关的 LLM-as-judge 评测工具包
GitHub 仓库 SaiCharan85/JudgeKit 发布，提供领域无关的 LLM-as-judge 评测工具包，含 YAML 评分标准、多评委面板、植入错误评测、Cohen's kappa 校准及位置/冗长/礼貌偏差测试。工具本身不发起 LLM 调用，用户需按 StructuredLLM 协议接入自己的客户端并提供领域评分标准，MIT 许可，当前版本 v0.2.0 已支持 1-5 分制打分评审与证据引文验证。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。