GitHub · 去对齐工具与仓库·· 15 天前AI 评分38
local-llm-eval:在本地电脑测试 Qwen2.5 印尼语问答与文档信息抽取准确率的工具
Godlinessgenusbrassavola663/local-llm-eval
来源与原文
GitHub · 去对齐工具与仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/Godlinessgenusbrassavola663/local-llm-eval
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
local-llm-eval 是一款无需编程即可在 Windows 电脑上运行的本地评测工具,用于测试 Qwen2.5(GGUF 格式)模型回答印尼语问题的准确率及从文档中抽取结构化信息的能力。工具采用 Wilson 置信区间和 McNemar 检验等统计方法保证结果可信,示例报告显示问答准确率 78.5%、文档抽取成功率 92.0%,支持自定义测试题数量与模型版本,并兼容 Google Colab 在线运行。
来源:GitHub · 去对齐工具与仓库 · github.com