为什么重要
SCAN 是组合泛化(compositional generalization)研究的奠基基准。通过简单导航命令(如 walk/jump/turn)的组合,测试模型能否从简单规则泛化到复杂组合。
评测设计
自然语言命令 → 动作序列翻译。分多个泛化测试集(如 add_jump、length split、template split)。
测试神经网络从简单命令到复杂命令的组合泛化
SCAN 是组合泛化(compositional generalization)研究的奠基基准。通过简单导航命令(如 walk/jump/turn)的组合,测试模型能否从简单规则泛化到复杂组合。
自然语言命令 → 动作序列翻译。分多个泛化测试集(如 add_jump、length split、template split)。