为什么重要
CodeXGLUE 统一了代码智能领域的评测标准，涵盖代码-代码（克隆检测、翻译）、代码-文本（摘要、搜索）、文本-代码（生成）、代码补全等四大类 14 项任务。
评测设计
基于已有数据集（如 CodeSearchNet、Bugs2Fix、BigCloneBench 等）构建统一评测框架。
返回评测
综合 综合-通用能力 接近饱和
模态 · 文本
任务 · 混合题型
CodeXGLUE
14 个代码智能任务的统一评测平台
Microsoft Research ·
考察能力
代码理解 代码生成 代码翻译 代码搜索 缺陷检测
构建信息
- 数据规模
- 14 个任务
- 评测方式
- 多种标准评测
- 核心指标
- Task-specific
资源链接
模型效果排行
🥇 GPT-4o
varies
🥈 CodeBERT
varies
代码智能 评测套件 多任务 经典基准