为什么重要
1024 道来自真实用户的高难度任务,覆盖 12 个类别。与 Arena-Hard 互补。
构建方式与示例
从 ShareGPT 筛选难题。每个类别独立评分:编码/数学/写作/推理/数据分析等。
关联基准与展望
关联:Arena-Hard、AlpacaEval。
1,024 道来自真实用户的高难度任务
1024 道来自真实用户的高难度任务,覆盖 12 个类别。与 Arena-Hard 互补。
从 ShareGPT 筛选难题。每个类别独立评分:编码/数学/写作/推理/数据分析等。
关联:Arena-Hard、AlpacaEval。