跳到正文
arXiv · cs.CL· Noureddine Khaous·· 18 天前AI 评分14

更好的度量指标救不了你:比较什么比怎么比较更关键

A Better Metric Will Not Save You: What You Compare Beats How You Compare It

来源与原文

arXiv · cs.CL

作者:Noureddine Khaous

发布时间:(北京时间)

阅读原始来源 · arxiv.org ↗
完整链接与内容说明

https://arxiv.org/abs/2610.13476v1

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

一项arXiv研究指出,RSA、CKA、Procrustes等表征相似性度量都在条件集给定之后才起作用,而条件集由输入的取舍与分组两个前置决定固定。实验在十五种语言、二十七种表征上以元音的声学组织为参照:固定类别数量时改变比较哪些类别,会使两个表征之间的差距变动超过所测效应的两倍;改变类别数量则毫无影响。在该设定下,模型排名受这些选择影响而可被识别,跨语言的排名则不能。

来源:arXiv · cs.CL · arxiv.org