唐
Tuntang
首页
书架
专栏
文章
研究
雷达
知识
评测
声浪
探索
首页
书架
专栏
文章
研究
雷达
知识
评测
声浪
探索
ESC
输入关键词开始搜索
↑↓
导航
↵
打开
Powered by Pagefind
微信
小红书
抖音
返回评测
推理
符号与图推理
未饱和
模态 · 文本
任务 · 选择 / 判断
NLGraph
评测 LLM 在图论问题上的推理能力
Tsinghua University
·
2023年5月1日
考察能力
图论推理
结构化推理
数学推理
构建信息
数据规模
29K 问题
评测方式
标准评测
核心指标
Accuracy
资源链接
论文: arXiv:2305.10037
模型效果排行
🥇
GPT-4o
72.5%
🥈
Claude 3.5 Sonnet
69.3%
为什么重要
NLGraph 将图论问题(最短路径、连通性、环检测、拓扑排序等)以自然语言描述呈现给 LLM,评测其在结构化推理上的能力。
图推理
结构化推理
图论
POPE
MP-DocVQA