跳到正文
GitHub · 去对齐工具与仓库·· 15 天前AI 评分38

local-llm-eval:在本地电脑测试 Qwen2.5 印尼语问答与文档信息抽取准确率的工具

Godlinessgenusbrassavola663/local-llm-eval

来源与原文

GitHub · 去对齐工具与仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/Godlinessgenusbrassavola663/local-llm-eval

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

local-llm-eval 是一款无需编程即可在 Windows 电脑上运行的本地评测工具,用于测试 Qwen2.5(GGUF 格式)模型回答印尼语问题的准确率及从文档中抽取结构化信息的能力。工具采用 Wilson 置信区间和 McNemar 检验等统计方法保证结果可信,示例报告显示问答准确率 78.5%、文档抽取成功率 92.0%,支持自定义测试题数量与模型版本,并兼容 Google Colab 在线运行。

来源:GitHub · 去对齐工具与仓库 · github.com