【CVPR2020】时序分组注意力视频超分

2020 年 7 月 1 日 专知

该文是清华大学&华为诺亚方舟联合提出的一种视频超分方案。在图像/视频质量改善领域,每年都会出现大量的paper,但真正值得深入研究的并不多。恰好该文是视频超分领域非常不错的文章之一,它在指标方面取得了媲美甚至优于EDVR的效果且并未使用形变卷积。所以这篇论文值得各位花点时间去了解一下。

视频超分旨在根据低分辨率视频生成高分辨率且更优视觉效果的视频,目前它引起了越来越多的关注。在这篇论文中,作者提出一种采用分层方式利用时序信息的方法。输入序列被分为多个组,不同组对应不同的帧率,这些组为参考帧重建遗失细节提供了互补信息,与此同时,还集成了注意力模块与组间融合模块。此外,作者还引入一种快速空域对齐以处理视频的大位移运动。

作者通过了实验证实了所提方法的在处理不同运动方面的有效性,并在多个基准数据集上取得了SOTA性能。总而言之,该文主要有下面几点贡献:

  • 提出一种新颖的神经网络,它可以通过帧率分组分层方式有效的融合空时信息;
  • 引入一种快速空域对齐方法处理大运动问题;
  • 所提方法在两个主流视频超分基准数据集上取得了SOTA性能



专知便捷查看

便捷下载,请关注专知公众号(点击上方蓝色专知关注)

  • 后台回复“VTGA” 可以获取《CVPR2020】时序分组注意力视频超分》专知下载链接索引

专知,专业可信的人工智能知识分发,让认知协作更快更好!欢迎注册登录专知www.zhuanzhi.ai,获取5000+AI主题干货知识资料!
欢迎微信扫一扫加入专知人工智能知识星球群,获取最新AI专业干货知识教程资料和与专家交流咨询
欢迎扫一扫关注专知视频号,第一时间看人工智能最新精彩视频!

点击“阅读原文”,了解使用专知,查看获取5000+AI主题知识资源
登录查看更多
0

相关内容

【CVPR2020-百度】用于视觉识别的门控信道变换
专知会员服务
12+阅读 · 2020年3月30日
注意力机制介绍,Attention Mechanism
专知会员服务
168+阅读 · 2019年10月13日
已删除
将门创投
3+阅读 · 2019年11月25日
【CVPR2019教程】视频理解中的图表示学习
专知
43+阅读 · 2019年6月20日
【干货】图卷积GCN前沿方法介绍
专知
32+阅读 · 2018年9月1日
Self-Attention Graph Pooling
Arxiv
5+阅读 · 2019年4月17日
Factor Graph Attention
Arxiv
6+阅读 · 2019年4月11日
Arxiv
6+阅读 · 2018年1月29日
VIP会员
Top
微信扫码咨询专知VIP会员