为什么重要
CoNLL-2003 是 NER 领域的事实标准基准,20+ 年来一直作为 NER 方法比较的首选。标注 PER/ORG/LOC/MISC 四类实体。
评测设计
基于 Reuters 新闻语料,IOB2 标注方案。使用 span-level F1 评测。
主要发现
- 从 CRF 到 BiLSTM-CRF 到 BERT,每代架构都在此基准上实现突破
- 预训练模型将 F1 从 ~91 提升到 ~94
NER 领域最广泛使用的英语评测基准
CoNLL-2003 是 NER 领域的事实标准基准,20+ 年来一直作为 NER 方法比较的首选。标注 PER/ORG/LOC/MISC 四类实体。
基于 Reuters 新闻语料,IOB2 标注方案。使用 span-level F1 评测。