跳到正文
热点事件持续更新

网友发现 Qwen3.8-27B EXL3 量化:KLD 0.0002 显存占用最低

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

Reddit 用户 yeasah 发布了 Qwen3.8-27B 的 EXL3 6bpw 量化版本,r/LocalLLaMA 用户 /u/suprjami 分享了这一发现,称其 KLD 误差在对比列表中最低,权重仅占 18.8 GiB 显存。 据该分享帖,此量化版本 KLD 均值仅 0.0002,文件大小 23 GB,精度优于 Unsloth Q8_K_XL(KLD 0.0005,31.5 GB)和 Minachist INT8 AutoRound(KLD 0.00056,36.9 GB),且文件更小。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月29日
  1. Reddit · r/LocalLLaMA
    yeasah 发布 Qwen3.8-27B EXL3 量化版本,KLD 低至 0.0002

    Reddit r/LocalLLaMA 用户发现 yeasah 的 Qwen3.8-27B EXL3 6bpw 量化,KLD 均值仅 0.0002,为对比列表中最低,权重仅占 18.8 GiB 显存、文件大小 23 GB。其精度优于 Unsloth Q8_K_XL(0.0005,31.5 GB)和 Minachist INT8 AutoRound(0.00056,36.9 GB),且文件更小。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。