跳到正文
GitHub · 去对齐工具与仓库·· 18 天前AI 评分37

VLMEvalKit:开源大型视觉语言模型评测工具包

open-compass/VLMEvalKit

来源与原文

GitHub · 去对齐工具与仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/open-compass/VLMEvalKit

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

VLMEvalKit(python 包名 vlmeval)是开源大型视觉语言模型(LVLM)评测工具包,支持一条命令在多种 benchmark 上评测 LVLM,采用生成式评测并提供精确匹配与 LLM 答案抽取两种判分方式。近期更新包括对 thinking mode 模型的支持(新增 SPLIT_THINK=True)及长响应 TSV 格式保存(PRED_FORMAT=tsv),并已支持 Video-MME-v2、SeePhys 等基准和 200+ 模型、70+ 图像与视频 benchmark。

来源:GitHub · 去对齐工具与仓库 · github.com