网友给EmbeddingGemma-2加2.4MB PCA头登顶MAEB音频榜
热点事件持续更新
网友给EmbeddingGemma-2加2.4MB PCA头登顶MAEB音频榜
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
Reddit 用户 /u/JeanMichelRanu 在不训练任何权重的情况下,给 google/embeddinggemma-2(577M 参数)加了一个约 2.37 MB 的冻结 PCA 矩阵头,称将 MAEB 音频榜成绩从 49.3% 提升到 54.4%,排名从第 26 名升至第 1。权重已发布在 BrunoHays/embeddinggemma-2-nullspace-audio。
AI 根据报道生成 · 56 分钟前更新
报道时间线
沿着报道,了解事件的不同侧面。
10月28日
- Reddit · r/LocalLLaMA精选网友用 2.4 MB PCA 头把 EmbeddingGemma-2 (577M) 推上 MTEB Audio (MAEB) 榜首
/u/JeanMichelRanu 在不训练任何权重的情况下,给 google/embeddinggemma-2 (577M) 加了一个 2.37 MB 的冻结 PCA 矩阵头,把 MAEB 音频榜成绩从 49.3% 提到 54.4%,从第 26 名升至第 1。方法是从冻结音频编码器的第 2 层和第 6 层提取声学特征,用 1400 条外部音频拟合 PCA 压缩到 256 维,注入 768d 向量中文本骨干未使用的 256 个零空间方向。副作用是音频嵌入不再支持 Matryoshka 截断,MInDS14 从 97.6% 降到 88.3%。权重发布在 BrunoHays/embeddinggemma-2-nullspace-audio。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。