GitHub · 去对齐工具与仓库·· 18 天前AI 评分37
VLMEvalKit:开源大型视觉语言模型评测工具包
open-compass/VLMEvalKit
来源与原文
GitHub · 去对齐工具与仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/open-compass/VLMEvalKit
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
VLMEvalKit(python 包名 vlmeval)是开源大型视觉语言模型(LVLM)评测工具包,支持一条命令在多种 benchmark 上评测 LVLM,采用生成式评测并提供精确匹配与 LLM 答案抽取两种判分方式。近期更新包括对 thinking mode 模型的支持(新增 SPLIT_THINK=True)及长响应 TSV 格式保存(PRED_FORMAT=tsv),并已支持 Video-MME-v2、SeePhys 等基准和 200+ 模型、70+ 图像与视频 benchmark。
来源:GitHub · 去对齐工具与仓库 · github.com