唐
Tuntang
首页
书架
专栏
文章
研究
雷达
知识
评测
声浪
探索
首页
书架
专栏
文章
研究
雷达
知识
评测
声浪
探索
ESC
输入关键词开始搜索
↑↓
导航
↵
打开
Powered by Pagefind
微信
小红书
抖音
返回评测
多模态
视频-理解
未饱和
模态 · 视频
任务 · 选择 / 判断
Video-ChatGPT Bench
评测视频 LLM 在时空理解、一致性等维度的能力
MBZUAI
·
2023年6月1日
考察能力
视频理解
时间推理
视频对话
构建信息
数据规模
500 视频
评测方式
GPT-4 评分
核心指标
Multi-dimensional Score
资源链接
论文: arXiv:2306.05424
模型效果排行
🥇
GPT-4o
4.2/5
🥈
Video-LLaVA
3.5/5
为什么重要
Video-ChatGPT Bench 从正确性、细节、上下文理解、时间理解、一致性五个维度评测视频语言模型的对话能力。
视频理解
视频对话
多模态
ChatDev Eval
ToolQA