为什么重要
QQP 是大规模释义检测(paraphrase detection)的标准基准。判断两个问题是否表达相同意图是搜索、问答系统的核心能力。
评测设计
400K+ Quora 问题对,标注为重复/非重复。类不平衡(约 37% 重复),因此用 F1 而非纯准确率评测。
主要发现
- 字面重叠是强基线,但语义理解显著提升表现
- 存在标注噪声,影响上限估计
- LLM 时代已接近天花板
判断两个 Quora 问题是否语义等价,GLUE 子任务
QQP 是大规模释义检测(paraphrase detection)的标准基准。判断两个问题是否表达相同意图是搜索、问答系统的核心能力。
400K+ Quora 问题对,标注为重复/非重复。类不平衡(约 37% 重复),因此用 F1 而非纯准确率评测。