返回评测
多模态 VLM-理解 未饱和 模态 · 图文 任务 · 开放生成

MMStar

1500 道精心筛选的视觉依赖多模态题目,消除了数据泄露和纯文本捷径

NTU & 多校 ·

考察能力

视觉理解 推理 数学 科学

构建信息

数据规模
1500 questions / 6 维度
构建方式
人工精选 + 视觉依赖验证
评测方式
多选准确率
核心指标
Accuracy (%)

模型效果排行

🥇 Gemini 2.5 Pro
~75% 2025-11

为什么重要

1500 道精心筛选的视觉依赖多模态题——每题都验证了”必须看图才能答对”,排除纯文字捷径。

构建方式与示例

从多个基准中精选 + 视觉依赖验证。排除了”不看图也能答对”的题目。

关联基准与展望

关联:MMMU、MM-Vet。

多模态 视觉 高质量