跳到正文
  1. GitHub · 去对齐工具与仓库66

    六个免费模型工具调用横评:gpt-oss-20b 以 88% 准确率胜出

    Shinzuu 发布 free-model-bakeoff 评测,六个免费模型在 126 次评分尝试、14 个对抗性问题上跑生产级 tool-calling 流程。openai/gpt-oss-20b 答对 88%、工具路由正确率 95%,超过比它大六倍的模型(64%/76%);同一权重换托管方降到 64%、中位延迟 28 秒。关键发现包括每日 20 万 token 的隐性限额(约等于全团队每天 60 个问题)、一句补充 'open' 定义的系统提示词带来最大准确率提升,以及评测中发现并修复的六个 harness bug。

    推荐理由:实测给出六个免费模型的准确率与工具路由数据,并指出同权重不同托管方的表现差异可能比模型间差距更大。

  1. Reddit · r/LocalLLaMA71

    DynamicTune 0.8B 模型在 ARC-Challenge 上以 42.15% 超越 2B 基座

    DynamicTune 通过闭式权重手术将 4B 教师模型的轨迹动态注入 Qwen3.5-0.8B,无需反向传播和训练 token,在约 12 分钟内于 8GB AMD RX 580 上完成。

    推荐理由:原文给出第三方在 NVIDIA L4 上用官方 lm_eval 复测的完整分数与统计显著性,读者可自行核对 0.8B 超越 2B 的结论。

已经到底了