为什么重要
WritingPrompts 来自 Reddit r/WritingPrompts 社区，是评测模型创意写作和长篇叙事能力的重要基准。303K 个故事提供了丰富的训练和评测资源。
返回评测
综合 综合-通用能力 未饱和
模态 · 文本
任务 · 混合题型
WritingPrompts
基于 Reddit 的故事生成评测基准
Facebook AI ·
考察能力
故事生成 创意写作 叙事能力
构建信息
- 数据规模
- 303K 故事
- 评测方式
- 人工评测 + 自动指标
- 核心指标
- Human Score / PPL
资源链接
模型效果排行
🥇 GPT-4o
varies (human eval)
🥈 Claude 3.5 Sonnet
varies (human eval)
创意写作 故事生成 NLG