跳到正文
热点事件持续更新

审计发现模型新版本常丢失既有预训练披露信息

1 篇报道1 个报道来源13 小时前更新

先了解这件事

AI 综述

Md Sakib Ul Islam 等作者发布审计论文(arXiv:2610.37465),用 2025 年 FMTI 的 24 项指标审计了 17 个模型族的 41 个模型条目,结论是后续模型发布并不稳定延续早期的预训练信息披露。 在十个模型族的 24 组相邻版本对比中,11 组披露分数下降、6 组上升、7 组不变,共出现 38 次指标丢失和 28 次新增。总分稳定也可能掩盖丢失:OLMo-2 与 OLMo-3 总分相同但各有三项增减;Llama-3.1 相比 Llama-2 分数提高,却丢了两项数据相关指标。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. arXiv · cs.CL
    语言模型新版本发布是否会延续此前的预训练信息披露?一项审计研究

    一项对 17 个模型族 41 个模型条目的文档审计显示,后续模型发布并不稳定延续早期的预训练信息披露。研究使用 2025 年 FMTI 的 24 项指标,在十个模型族的 24 组相邻对比中,11 组分数下降、6 组上升、7 组不变,共出现 38 次指标丢失和 28 次新增。即使总分稳定也可能掩盖丢失:OLMo-2 与 OLMo-3 总分相同但各有三项增减,Llama-3.1 相比 Llama-2 分数提高却丢了两项数据相关指标的得分。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。