唐
Tuntang
首页
书架
专栏
文章
研究
雷达
知识
评测
声浪
探索
首页
书架
专栏
文章
研究
雷达
知识
评测
声浪
探索
ESC
输入关键词开始搜索
↑↓
导航
↵
打开
Powered by Pagefind
微信
小红书
抖音
返回评测
Agent
Agent-工具调用
未饱和
模态 · 文本
任务 · 执行验证
CRMArena
评测 AI Agent 在企业 CRM 系统中的任务执行能力
Salesforce AI
·
2024年11月1日
考察能力
CRM 操作
数据查询
业务流程
构建信息
数据规模
16 任务 × 多个实例
评测方式
任务完成评测
核心指标
Task Success Rate
资源链接
论文: arXiv:2411.XXXXX
模型效果排行
🥇
GPT-4o
42%
🥈
Claude 3.5 Sonnet
38%
为什么重要
CRMArena 是少有的聚焦企业 CRM 场景的 Agent 评测。模型需理解客户数据模型、执行 SOQL 查询、处理多步业务逻辑。
Agent
企业应用
CRM
业务流程
FrontierMath
ARC-AGI