【斯坦福&Facebook】生成式对抗变换器,Generative Adversarial Transformers

2021 年 4 月 21 日 专知


本文介绍了一种新型高效的变换器模型GANsformer,并将其应用于可视化生成建模。该网络采用了两部分结构,使跨图像的远距离交互成为可能,同时保持线性效率的计算,可以很容易地扩展到高分辨率合成。它从一组潜在变量迭代地传播信息到进化的视觉特征,反之亦然,以支持每一个根据另一个来细化,并鼓励物体和场景的合成表现形式的出现。与经典的变换器架构相比,它利用了乘法积分,允许灵活的基于区域的调制,因此可以被视为成功的StyleGAN网络的推广。我们通过对一系列数据集(从模拟的多目标环境到丰富的真实室内和室外场景)的仔细评估,展示了该模型的强度和鲁棒性,表明它在图像质量和多样性方面达到了最先进的结果,同时拥有快速学习和更好的数据效率。进一步的定性和定量实验为我们提供了对模型内部工作的深入了解,揭示了改进的可解释性和更强的解纠缠性,并说明了我们方法的好处和有效性。



专知便捷查看

便捷下载,请关注专知公众号(点击上方蓝色专知关注)

  • 后台回复“GATR” 就可以获取【斯坦福&Facebook】生成式对抗变换器,Generative Adversarial Transformers》专知下载链接

专知,专业可信的人工智能知识分发 ,让认知协作更快更好!欢迎注册登录专知www.zhuanzhi.ai,获取5000+AI主题干货知识资料!


欢迎微信扫一扫加入专知人工智能知识星球群,获取最新AI专业干货知识教程资料和与专家交流咨询
点击“ 阅读原文 ”,了解使用 专知 ,查看获取5000+AI主题知识资源
登录查看更多
0

相关内容

【AAAI2021】双级协作变换器Transformer图像描述生成
专知会员服务
26+阅读 · 2021年1月26日
【EMNLP2020】自然语言生成,Neural Language Generation
专知会员服务
38+阅读 · 2020年11月20日
【Google】平滑对抗训练,Smooth Adversarial Training
专知会员服务
48+阅读 · 2020年7月4日
【KDD2020】图神经网络生成式预训练
专知
22+阅读 · 2020年7月3日
【初学者指南】神经网络中的数学
专知
31+阅读 · 2019年12月16日
Arxiv
0+阅读 · 2021年6月23日
Arxiv
8+阅读 · 2018年5月21日
Arxiv
4+阅读 · 2018年5月21日
Arxiv
10+阅读 · 2018年3月23日
Arxiv
10+阅读 · 2018年2月17日
VIP会员
Top
微信扫码咨询专知VIP会员