【ICML2022】DRIBO:基于多视图信息瓶颈的鲁棒深度强化学习

深度强化学习(DRL)智能体通常对其训练环境中看不到的视觉变化敏感。为了解决这个问题，我们利用RL的顺序特性来学习稳健的表示，这种表示只编码来自基于无监督多视图设置的观察的任务相关信息。具体地说，我们为时间数据引入了一个新的多视图信息瓶颈(MIB)目标的对比版本。我们用这个辅助目标从像素训练RL智能体来学习鲁棒的表示，它可以压缩与任务无关的信息，并可以预测与任务相关的动态。这种方法使我们能够训练出高性能的策略，这些策略能够抵御视觉干扰，并能够很好地推广到看不见的环境中。我们证明，当背景被自然视频取代时，我们的方法可以在DeepMind控制套件中不同的视觉控制任务集上实现SOTA性能。此外，我们还展示了在Procgen基准测试中，我们的方法优于已建立的基线，可以泛化到看不见的环境。我们的代码是开源的，可以在https://github上找到。com/BU-DEPEND-Lab/DRIBO。

专知便捷查看

便捷下载，请关注专知公众号（点击上方蓝色专知关注）

• 后台回复“DRIBO” 就可以获取《【ICML2022】DRIBO:基于多视图信息瓶颈的鲁棒深度强化学习》专知下载链接

                       

专知，专业可信的人工智能知识分发 ，让认知协作更快更好！欢迎注册登录专知www.zhuanzhi.ai，获取100000+AI(AI与军事、医药、公安等)主题干货知识资料！

欢迎微信扫一扫加入专知人工智能知识星球群，获取最新AI专业干货知识教程资料和与专家交流咨询！

点击“ 阅读原文 ”，了解使用 专知 ，查看获取100000+AI主题知识资料