为什么重要
WMT 是机器翻译领域的旗舰评测活动,自 2006 年起每年举办。定义了翻译质量评测标准,推动了从统计翻译到神经翻译的范式变迁。
评测设计
每年设置不同语言对(如 en-de, en-zh, en-ru 等),提供平行语料训练集和标准测试集。结合自动指标和人工评测。
主要发现
- Transformer 在 WMT 2017 首次展示了强大翻译能力
- LLM 在翻译质量上已与专用翻译模型匹敌
- 低资源语言对仍是主要挑战
年度机器翻译共享任务,多语言翻译质量评测
WMT 是机器翻译领域的旗舰评测活动,自 2006 年起每年举办。定义了翻译质量评测标准,推动了从统计翻译到神经翻译的范式变迁。
每年设置不同语言对(如 en-de, en-zh, en-ru 等),提供平行语料训练集和标准测试集。结合自动指标和人工评测。