返回评测
数据 数据-表格 接近饱和 模态 · 表格 任务 · 结构化输出 ACL 2015

WikiTableQuestions

22,033 个基于真实维基百科表格的复杂问答,需要多步操作(筛选/排序/计算/比较)

Stanford ·

考察能力

表格QA 多步推理 筛选 计算

构建信息

数据规模
22033 questions / 2108 tables
构建方式
众包标注维基百科表格
评测方式
精确匹配
核心指标
Accuracy (%)

模型效果排行

🥇 GPT-4 + CoT
~75% 2024-01

为什么重要

22033 个基于维基百科表格的复杂问答——需要多步操作(筛选/排序/计算/比较)。

构建方式与示例

例如:[国家人口表] “人口超过 1 亿的国家中,GDP 最低的是哪个?“(需要筛选→排序→取值)

关联基准与展望

关联:TabFact、BIRD。接近饱和。

表格 QA 维基百科