【NeurIPS2021】视觉语言导航的课程学习

Curriculum Learning for Vision-and-Language Navigation 视觉语言导航的课程学习

作者：Jiwen Zhang, Zhongyu Wei, Jianqing Fan, Jiajie Peng

类型：NeurIPS 2021，Poster Paper

视觉和语言导航 (VLN) 是指智能体在人类语言的指导下进行室内导航的一项任务。我们发现以前的工作忽略了数据集中样本难度的分布。我们认为这潜在降低了那些智能体的性能。为此，我们为 VLN 任务提出了一种新的基于课程学习的训练范式。该训练范式可以平衡人类先验知识和智能体对训练样本的学习进度。我们制定了课程设计原则，并重新排列了基准 Room-to-Room (R2R) 数据集，使其适合课程培训。实验表明，我们的方法与模型无关，并且可以在不增加模型复杂度的情况下显着提高当前最先进导航代理的性能、通用性和训练效率。

https://www.zhuanzhi.ai/paper/ff17c28e135334c82edabc43efdcd6b1