返回评测
综合 综合-中文 接近饱和 模态 · 文本 任务 · 混合题型

CMMLU

11,528 道涵盖 67 个中文学科的题目，补充 C-Eval 覆盖更多中国特色领域

MBZUAI & 社区 ·

考察能力

中文理解 中文知识 中国特色学科

构建信息

数据规模
11,528 questions / 67 subjects
评测方式
标准评测
核心指标
Accuracy (%)

资源链接

论文: arXiv:2306.09212

模型效果排行

🥇 GPT-5
88.4%
🥈 Qwen2.5-72B
86.3%
🥉 DeepSeek V3
84.1%

为什么重要

CMMLU 是 MMLU 的中文版，67 个学科覆盖中国教育体系和文化知识。与 C-Eval 互补。

构建方式与示例

从中国各级考试收集，67 个学科。例如中国古代文学：“‘两个黄鹂鸣翠柳’的下一句是？“

关联基准与展望

关联：C-Eval、MMLU、MMMLU。不足：部分题目过时。

中文 综合 多学科