自建波兰语小测试集公布小模型初步结果
先了解这件事
一位开发者（Reddit 用户 /u/Full-Travel857）自建了名为 "Zacharski tests" 的测试集，在自己的 RTX 5050（8 GB VRAM）笔记本上通过 Ollama 测试本地小模型的波兰语能力，并公布了首批结果。测试集包含 8 个波兰语任务（7 个语法题加 1 个取自 13 世纪《Henryków 书》的知识题）、4 个 JSON 任务和 3 个 Python 任务。 初步结果显示，gemma2:9b（Q4_0 量化）在 JSON 和代码任务上得 7/7，但波兰语任务仅得 3/8，例如把 "22 只猫" 错写成 "dwudziesty dwa koty"。作者称后续还将测试 qwen3:8b、llama3.1:8b、gemma3:12b 以及波兰语模型 Bielik 11B 和 Bielik-Minitron 7B。 作者强调这只是小样本快速检查，在自己电脑上按实际使用的量化版本运行，并非排名。测试设置为每任务单次作答、temperature 0（seed 42）、上下文 2k、关闭思考；生成的代码仅用 Python ast 解析，不执行。
AI 根据报道生成 · 15 小时前更新
报道时间线
沿着报道，了解事件的不同侧面。
- Reddit · r/LocalLLaMA自建 "Zacharski tests"：在 8 GB VRAM 上快速测试本地小模型的波兰语语法能力
一位开发者在 RTX 5050（8 GB）笔记本上用 Ollama 自建了 "Zacharski tests" 测试集，包含 8 个波兰语任务（7 个语法题 + 1 个知识题，来自 13 世纪《Henryków 书》）、4 个 JSON 任务和 3 个 Python 任务。首批结果显示 gemma2:9b（Q4_0）JSON/代码得 7/7，但波兰语仅 3/8，如把 "22 只猫" 写成 "dwudziesty dwa koty"。后续将测试 qwen3:8b、llama3.1:8b、gemma3:12b 及波兰语模型 Bielik 11B 和 Bielik-Minitron 7B，作者强调这只是小样本快速检查而非排名。
本事件热度走势
- 可比范围当前
- 7
- 可比范围峰值
- 1011月6日 01:00
- 近 24 小时变化
- –
趋势仅比较持续完整观测到的相同主体，范围可能小于当前热度统计。移动指针或点击图表查看每小时热度；键盘可用左右方向键切换。