返回评测
推理 逻辑推理 未饱和 模态 · 文本 任务 · 选择 / 判断

PrOntoQA

基于本体知识的逻辑推理链基准

University of Michigan ·

考察能力

本体推理 逻辑链推理 演绎推理

构建信息

数据规模
15K+ 问题
评测方式
标准评测
核心指标
Accuracy

模型效果排行

🥇 GPT-4o
89.5%
🥈 Claude 3.5 Sonnet
86.2%

为什么重要

PrOntoQA 生成基于本体结构的推理问题,可精确控制推理深度和推理类型。是分析 CoT 推理质量的理想探针基准。

逻辑推理 本体 演绎推理 Chain-of-Thought