GitHub · 去对齐工具与仓库·· 18 天前AI 评分49
industrial-selection-bench:工业品选型 AI 流水线对比基准(JEV vs RAG vs Gemma 4)
armando-token/industrial-selection-bench
来源与原文
GitHub · 去对齐工具与仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/armando-token/industrial-selection-bench
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
该仓库发布一个可复现的工业品选型试点基准,比较 4 条 AI 流水线与一个无模型规则引擎,各在 12 个 held-out 案例上运行 3 次,共 180 次评分。最好的引擎(jev-1.13.0 结构化流水线)仅解出 2/12 案例,所有置信区间重叠,准确率上无明显赢家;但它中位延迟 235 ms,比 RAG 快 14.6×、比爬取 agent 快 47.5×。三个引擎(含无模型规则引擎)都误批准了应拒判的 R09 案例,作者提醒结果为小样本试点。
来源:GitHub · 去对齐工具与仓库 · github.com