返回评测
综合 综合-知识 未饱和 模态 · 文本 任务 · 选择 / 判断

KILT

11 个数据集的知识密集型评测套件,统一检索-生成框架

Facebook AI ·

考察能力

知识检索 事实核查 问答 对话 slot filling

构建信息

数据规模
11 数据集合集
评测方式
标准评测
核心指标
R-precision / Accuracy / F1

模型效果排行

🥇 GPT-4o + RAG
varies by task
🥈 RAG (Lewis et al.)
varies by task

为什么重要

KILT 将 11 个知识密集型任务(事实核查、实体链接、问答等)统一到同一个 Wikipedia 知识源上,是评测检索增强生成(RAG)系统的标准平台。

知识检索 RAG 知识密集型 评测套件