何恺明团队用猫片学会 ARC 挑战

摘要

ARC 挑战要求模型从少量示例中推理出抽象规则，过去需要专门训练。何恺明团队发现，用 ImageNet 预训练的视觉编码器直接提取特征，就能在 ARC 任务上取得不错的结果——模型不需要见过 ARC 的任何训练数据。这意味着视觉基础模型已经隐含了部分抽象推理能力，关键是把特征用对。