hongkongee 开源系统无关的 NL-to-SQL 评测工具 sql-eval-harness

hongkongee 在 GitHub 发布 sql-eval-harness，用 SQL Validity、EM、EX 三项指标对 NL-to-SQL 系统评分，只要提交 predictions.jsonl 即可打分，不关心 SQL 由 zero-shot、RAG 还是 LoRA 微调模型生成。工具自带 10 题 OMOP CDM v5.3 测试集与沙箱 PostgreSQL 评分逻辑，并提供 infer_lora.py 推理脚本和基于 sqlglot 静态分析的 API 评测脚本（Syntactic Validity、Format 偏离率、schema 幻觉、响应速度）。已知局限包括 6 个题目因沙箱库无对应 concept_id 数据导致 EX 区分度低，且目前仅支持单一 db_id。