返回评测
数据 数据-Text2SQL 接近饱和 模态 · 表格 任务 · 结构化输出

Spider

10,181 个问题 + 200 个数据库,Text-to-SQL 的开山基准

Yale ·

考察能力

Text-to-SQL 数据库理解 SQL生成 跨数据库泛化

构建信息

数据规模
10,181 questions / 200 databases
评测方式
标准评测
核心指标
Execution Accuracy (%)

模型效果排行

🥇 GPT-5
89.2%
🥈 DAIL-SQL + GPT-4
86.6%
🥉 Claude Opus 4
84.1%

为什么重要

Spider 是 Text-to-SQL 的开山基准——200 个数据库 + 10,181 个问答对。BIRD 是其进化版。

构建方式与示例

200 个干净的关系数据库 + 自然语言查询。例如:“查询所有年龄大于 25 的员工的姓名和部门。“

关联基准与展望

关联:BIRD、DataBench。不足:数据库太干净,不反映真实脏数据。

SQL 数据库 Text-to-SQL