为什么重要
PersonaChat 通过为对话参与者分配人物画像（如「我是素食主义者」「我养了两只猫」），测试模型保持角色一致性的能力。是开放域对话系统的关键基准。
评测设计
每人被分配 4-5 条个人描述，在此基础上进行对话。模型需在对话中保持与 persona 一致。
返回评测
综合 综合-对话 接近饱和
模态 · 文本
任务 · 开放生成
PersonaChat
基于人物画像的开放域对话基准
Facebook AI ·
考察能力
对话生成 个性化 一致性维持
构建信息
- 数据规模
- 164K 对话轮次
- 评测方式
- 标准评测 + 人工评测
- 核心指标
- Hits@1 / F1 / PPL
资源链接
模型效果排行
🥇 GPT-4o
~95% Hits@1
🥈 BlenderBot
~90% Hits@1
对话系统 个性化 一致性 开放域