GitHub · 灵魂体仓库·· 17 天前AI 评分42
oold-llm-bench:OO-LD 面向 schema 约束 LLM 抽取的假设驱动基准
OO-LD/oold-llm-bench
来源与原文
GitHub · 灵魂体仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/OO-LD/oold-llm-bench
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
OO-LD 发布 oold-llm-bench,一个衡量 LLM 在 schema 约束下抽取结构化数据质量的假设驱动基准。实验对比提示词、解码时约束、提交时约束等强制方式的组合,以 (entity, property, value) 三元组级 F1 打分,语料涵盖 schema.org、QUDT 和 Wiki-Measurements。代码采用 Apache-2.0,附浏览器 Playground 可逐步查看抽取结果与验证失败原因。
来源:GitHub · 灵魂体仓库 · github.com