arXiv · cs.CL· Zhaolu Kang·· 4 天前AI 评分32
TRIAD 基准:评测多模态大语言模型的全模态歧义消解能力
TRIAD: Benchmarking Omni-Modal Ambiguity in Multimodal Large Language Models
来源与原文
arXiv · cs.CL
作者:Zhaolu Kang
发布时间:(北京时间)
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.30841v1
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
研究者推出 TRIAD 基准,用文本-图像-音频三元组评测全模态大模型的歧义消解能力,包含 327 个手写问题、86 个场景组和 18 类歧义。对 14 个全模态系统的评测显示,最佳模型的组级准确率仍落后人类 20 分以上;移除答案选项后模型组准确率跌至个位数,且现有系统在文本和图像并存时常低估音频线索。
来源:arXiv · cs.CL · arxiv.org