为什么重要
MEGA-Bench 是目前最大规模的多模态评测——500+ 个任务覆盖视觉识别、推理、创作等多种能力类型。
构建方式
- 500+ 个多模态任务,远超 MMMU 的规模
- 覆盖:视觉识别、空间推理、文字理解、创意生成等
- 多维度评分
关联基准
不足与展望
- 任务类型覆盖广但每类深度不够
- 评分标准复杂,可复现性有待验证
505 个覆盖日常使用场景的多模态任务,比 MMMU 更贴近真实用户需求
MEGA-Bench 是目前最大规模的多模态评测——500+ 个任务覆盖视觉识别、推理、创作等多种能力类型。