跳到正文
热点事件持续更新

论文借Kripke-维特根斯坦质疑LLM基准评测有效性

1 篇报道1 个报道来源19 小时前更新

先了解这件事

AI 综述

Niyar R Barman 在 arXiv 发布论文(arXiv:2610.35111),借助 Kripke 对维特根斯坦的解读指出大语言模型采用的“意义即使用”观面临规则遵循挑战:有限的使用历史无法唯一确定未来扩展的规则。据此,作者论证仅测量固定用例或局部鲁棒性的基准不足以确立模型的语义能力。 论文提出新的实验范式,通过测试抽象与递归两种能力,评估模型在原则性领域扩展下能否保持规则与概念。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月26日
  1. arXiv · cs.CL
    以 Kripke 式挑战重思 LLM 评估:基于“意义即使用”的原则性泛化

    一篇 arXiv 论文借助 Kripke 对 Wittgenstein 的解读,指出大语言模型所采用的“意义即使用”观面临规则遵循挑战:有限的使用历史无法唯一确定未来扩展的规则。作者据此论证仅测量固定用例或局部鲁棒性的 benchmark 不足以确立语义能力,并提出通过抽象与递归两种能力的实验范式来评估模型在原则性领域扩展下能否保持规则与概念。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。