为什么重要
DS-1000 包含 1000 个来自 StackOverflow 的数据科学编程问题，覆盖 NumPy/Pandas/Matplotlib/Sklearn 等 7 个库。
构建方式与示例
从 StackOverflow 热门问答改编。例如：“用 pandas 将一个 DataFrame 按月份分组并计算每组的均值。“
关联基准与展望
关联：BigCodeBench、DSBench。不足：绑定特定库版本。
返回评测
代码生成 代码-领域特化 未饱和
模态 · 代码
任务 · 代码生成
DS-1000
1,000 个基于 StackOverflow 的数据科学编程问题，覆盖 Pandas/NumPy/Sklearn 等 7 个库
HKU & THU ·
考察能力
数据科学 Pandas NumPy Sklearn 数据处理 可视化
构建信息
- 数据规模
- 1,000 problems / 7 libraries
- 评测方式
- 标准评测
- 核心指标
- pass@1 (%)
资源链接
模型效果排行
🥇 GPT-5
82.6%
🥈 Claude Opus 4
78.4%
🥉 GPT-4o
68.1%
数据科学 Pandas 代码生成