返回评测
综合 综合-通用能力 未饱和 模态 · 文本 任务 · 混合题型

Gaokao-Bench

2010-2022 年中国高考真题,涵盖 9 个学科,评估模型中文综合能力的重要基准

Fudan University ·

考察能力

中文理解 数学推理 科学知识 文学分析

构建信息

数据规模
2,842 questions / 9 subjects
评测方式
标准评测 + 人工评分(作文)
核心指标
Accuracy (%) / Score

模型效果排行

🥇 GPT-5
~680/750
🥈 DeepSeek-R1
~660/750
🥉 Qwen-2.5-72B
~640/750

为什么重要

中国高考是全球最大规模的标准化考试,Gaokao-Bench 将其系统化为 LLM 评测基准。相比 C-Eval/CMMLU 的选择题形式,高考包含填空、简答、作文等多种题型,对中文模型的评估更全面。

构建方式

  1. 收集 2010-2022 年全国卷和各省卷高考真题
  2. 覆盖语文、数学、英语、物理、化学、生物、历史、地理、政治 9 科
  3. 保留原始题型(选择/填空/简答/作文)

任务示例

数学:“已知函数 f(x) = x³ - 3x + 1,求函数的极值点和极值。” 语文作文:“阅读以下材料,写一篇不少于 800 字的文章。“

关键发现

  • 数学和理科仍是模型弱项,尤其是几何证明
  • 语文作文评分高度依赖评估标准
  • 中文特色知识(历史、政治)对国际模型有挑战

关联基准

  • C-Eval:中文多学科选择题
  • CMMLU:中文多任务理解
  • AGIEval:多国考试评测

不足与展望

  • 作文等开放题型难以自动评分
  • 高考题库有限,存在污染风险
  • 部分学科(如政治)答案有时效性
中文 高考 综合 考试 中国特色