OmniCompass:面向全模态视频定位与理解的整体性 Benchmark
研究者推出全模态视频定位与理解 benchmark OmniCompass,含 OmniCompass-VL 与 OmniCompass-AV 两条评测轨道,各含时序定位(TG)、空间定位(SG)和问答(QA)三类任务。OmniCompass-VL 含 820 个视频、2,460 个实例,OmniCompass-AV 含 240 个视频、720 个实例。对 50 个 MLLM 的评测显示开源模型仍落后闭源模型,尤其在视听理解方面,时序与空间定位对领先模型仍是挑战。