Legal Eye 希伯来语法律 RAG 公开评测:strict 判定 48% 通过未达 85% 发布门槛
热点事件观察中
Legal Eye 希伯来语法律 RAG 公开评测:strict 判定 48% 通过未达 85% 发布门槛
1 篇报道1 个报道来源2 天前更新
先了解这件事
AI 综述
GitHub 仓库 legal-eye-eval 公开希伯来语法律 RAG 系统 Legal Eye 的质量评测结果:2026-10-25 的最新 50 题运行中,幻觉引文率为 0%,5 道超范围问题全部拒答,但按 strict 判定仅 24/50(48%)通过,未达到 85%(43/50)的发布门槛。评测由 GitHub Actions 每周日自动重跑。 评测范围有限:语料仅覆盖以色列最高法院 2022 年快照共 751,194 份文档(多为临时判决),答案引擎是针对这 50 道题开发的,因此该题集上的得分偏乐观。冻结测试集上法律题通过率为 19/30。
AI 根据报道生成 · 2 天前更新
最新进展10月25日 16:21
Legal Eye 希伯来语法律 RAG 公开评测仓库 legal-eye-eval 发布报道时间线
沿着报道,了解事件的不同侧面。
10月25日
- GitHub · 灵魂体仓库Legal Eye 希伯来语法律 RAG 公开评测仓库 legal-eye-eval 发布
legal-eye-eval 是希伯来语法律 RAG 系统 Legal Eye 的公开质量评测仓库,其答案逐字引用真实以色列判例,不接外部 LLM,最新 50 题评测中幻觉引文率为 0%、5/5 超范围问题全部拒答。评测由 GitHub Actions 每周日自动重跑,但按 2026-10-24 起的 strict verdict 仅 24/50(48%)通过,未达到 85% 的发布门槛。语料仅覆盖以色列最高法院 2022 年快照共 751,194 份文档,冻结测试集上法律题通过率为 19/30。
本事件热度走势
- 可比范围当前
- 3
- 可比范围峰值
- 1010月25日 17:00
- 近 24 小时变化
- -50%
02.557.510
10月26日12:0010月27日12:00
趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。