唐
Tuntang
首页
书架
专栏
文章
研究
雷达
知识
评测
声浪
探索
首页
书架
专栏
文章
研究
雷达
知识
评测
声浪
探索
ESC
输入关键词开始搜索
↑↓
导航
↵
打开
Powered by Pagefind
微信
小红书
抖音
返回评测
推理
逻辑推理
未饱和
模态 · 文本
任务 · 选择 / 判断
PrOntoQA
基于本体知识的逻辑推理链基准
University of Michigan
·
2022年10月1日
考察能力
本体推理
逻辑链推理
演绎推理
构建信息
数据规模
15K+ 问题
评测方式
标准评测
核心指标
Accuracy
资源链接
论文: arXiv:2210.01240
模型效果排行
🥇
GPT-4o
89.5%
🥈
Claude 3.5 Sonnet
86.2%
为什么重要
PrOntoQA 生成基于本体结构的推理问题,可精确控制推理深度和推理类型。是分析 CoT 推理质量的理想探针基准。
逻辑推理
本体
演绎推理
Chain-of-Thought
GLUE-X
MTEB Retrieval