Image-to-image translation based on generative adversarial network (GAN) has achieved state-of-the-art performance in various image restoration applications. Single image dehazing is a typical example, which aims to obtain the haze-free image of a haze one. This paper concentrates on the challenging task of single image dehazing. Based on the atmospheric scattering model, we design a novel model to directly generate the haze-free image. The main challenge of image dehazing is that the atmospheric scattering model has two parameters, i.e., transmission map and atmospheric light. When we estimate them respectively, the errors will be accumulated to compromise dehazing quality. Considering this reason and various image sizes, we propose a novel input-size flexibility conditional generative adversarial network (cGAN) for single image dehazing, which is input-size flexibility at both training and test stages for image-to-image translation with cGAN framework. We propose a simple and effective U-type residual network (UR-Net) to combine the generator and adopt the spatial pyramid pooling (SPP) to design the discriminator. Moreover, the model is trained with multi-loss function, in which the consistency loss is a novel designed loss in this paper. We finally build a multi-scale cGAN fusion model to realize state-of-the-art single image dehazing performance. The proposed models receive a haze image as input and directly output a haze-free one. Experimental results demonstrate the effectiveness and efficiency of the proposed models.


翻译:基于基因对抗网络(GAN)的图像到图像转换在各种图像恢复应用中取得了最新性能。单一图像脱色是一个典型的例子,目的是获得一个烟雾层的无烟图像。本文侧重于单一图像脱色这一具有挑战性的任务。基于大气散射模型,我们设计了一个新颖模型,直接生成无烟图像。图像解色的主要挑战是大气散射模型有两个参数,即传输地图和大气光。当我们分别估算这些参数时,错误将累积起来,以降低脱色质量。考虑到这一原因和各种图像大小,我们提议建立一个新的投入规模灵活性的固定对抗网络(cGAN),用于单一图像脱色。基于大气散射模型,我们设计了一个在培训和测试两个阶段直接生成无烟雾图像的图像。我们建议一个简单而有效的U型残余模型(UR-Net),将生成器和采用空间金字塔集合(SPP),以降低去除质量质量质量。考虑到这一原因和图像大小,我们提议的一个测试模型将最终设计为透明度的模型,一个成本模型,一个我们所设计的图像解析度的模型,这个模型,一个成本的模型将最终与一个测试的模型,一个成本的模型,一个升级的模型,一个模型将实现。

1
下载
关闭预览

相关内容

带条件约束的GAN,在生成模型(D)和判别模型(G)的建模中均引入条件变量y(conditional variable y),使用额外信息y对模型增加条件,可以指导数据生成过程。
【CVPR2021】GAN人脸预训练模型
专知会员服务
23+阅读 · 2021年4月10日
无参考图像质量评价研究进展
专知会员服务
28+阅读 · 2021年2月14日
生成对抗网络GAN在各领域应用研究进展(中文版),37页pdf
专知会员服务
150+阅读 · 2020年12月30日
零样本图像分类综述 : 十年进展
专知会员服务
126+阅读 · 2019年11月16日
meta learning 17年:MAML SNAIL
CreateAMind
11+阅读 · 2019年1月2日
disentangled-representation-papers
CreateAMind
26+阅读 · 2018年9月12日
条件GAN重大改进!cGANs with Projection Discriminator
CreateAMind
8+阅读 · 2018年2月7日
计算机视觉近一年进展综述
机器学习研究会
9+阅读 · 2017年11月25日
gan生成图像at 1024² 的 代码 论文
CreateAMind
4+阅读 · 2017年10月31日
Auto-Encoding GAN
CreateAMind
7+阅读 · 2017年8月4日
Arxiv
7+阅读 · 2018年1月21日
Arxiv
4+阅读 · 2017年11月4日
VIP会员
相关VIP内容
【CVPR2021】GAN人脸预训练模型
专知会员服务
23+阅读 · 2021年4月10日
无参考图像质量评价研究进展
专知会员服务
28+阅读 · 2021年2月14日
生成对抗网络GAN在各领域应用研究进展(中文版),37页pdf
专知会员服务
150+阅读 · 2020年12月30日
零样本图像分类综述 : 十年进展
专知会员服务
126+阅读 · 2019年11月16日
Top
微信扫码咨询专知VIP会员