跳到正文
热点事件观察中

Legal Eye 希伯来语法律 RAG 公开评测:strict 判定 48% 通过未达 85% 发布门槛

1 篇报道1 个报道来源2 天前更新

先了解这件事

AI 综述

GitHub 仓库 legal-eye-eval 公开希伯来语法律 RAG 系统 Legal Eye 的质量评测结果:2026-10-25 的最新 50 题运行中,幻觉引文率为 0%,5 道超范围问题全部拒答,但按 strict 判定仅 24/50(48%)通过,未达到 85%(43/50)的发布门槛。评测由 GitHub Actions 每周日自动重跑。 评测范围有限:语料仅覆盖以色列最高法院 2022 年快照共 751,194 份文档(多为临时判决),答案引擎是针对这 50 道题开发的,因此该题集上的得分偏乐观。冻结测试集上法律题通过率为 19/30。

AI 根据报道生成 · 2 天前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月25日
  1. GitHub · 灵魂体仓库
    Legal Eye 希伯来语法律 RAG 公开评测仓库 legal-eye-eval 发布

    legal-eye-eval 是希伯来语法律 RAG 系统 Legal Eye 的公开质量评测仓库,其答案逐字引用真实以色列判例,不接外部 LLM,最新 50 题评测中幻觉引文率为 0%、5/5 超范围问题全部拒答。评测由 GitHub Actions 每周日自动重跑,但按 2026-10-24 起的 strict verdict 仅 24/50(48%)通过,未达到 85% 的发布门槛。语料仅覆盖以色列最高法院 2022 年快照共 751,194 份文档,冻结测试集上法律题通过率为 19/30。

本事件热度走势

可比范围当前
3
可比范围峰值
1010月25日 17:00
近 24 小时变化
-50%

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。