Age progression and regression aim to synthesize photorealistic appearance of a given face image with aging and rejuvenation effects, respectively. Existing generative adversarial networks (GANs) based methods suffer from the following three major issues: 1) unstable training introducing strong ghost artifacts in the generated faces, 2) unpaired training leading to unexpected changes in facial attributes such as genders and races, and 3) non-bijective age mappings increasing the uncertainty in the face transformation. To overcome these issues, this paper proposes a novel framework, termed AgeFlow, to integrate the advantages of both flow-based models and GANs. The proposed AgeFlow contains three parts: an encoder that maps a given face to a latent space through an invertible neural network, a novel invertible conditional translation module (ICTM) that translates the source latent vector to target one, and a decoder that reconstructs the generated face from the target latent vector using the same encoder network; all parts are invertible achieving bijective age mappings. The novelties of ICTM are two-fold. First, we propose an attribute-aware knowledge distillation to learn the manipulation direction of age progression while keeping other unrelated attributes unchanged, alleviating unexpected changes in facial attributes. Second, we propose to use GANs in the latent space to ensure the learned latent vector indistinguishable from the real ones, which is much easier than traditional use of GANs in the image domain. Experimental results demonstrate superior performance over existing GANs-based methods on two benchmarked datasets. The source code is available at https://github.com/Hzzone/AgeFlow.


翻译:年龄进化和回归旨在将一个特定面部图像的光现实外观与老化和再生效应结合起来。基于基因的对抗网络(GANs)的现有方法有以下三个主要问题:(1) 在生成的面孔中引入强烈的幽灵文物的培训不稳定,(2) 导致性别与种族等面部属性发生意想不到的变化的不完善的培训,(3) 将性别与种族等面部属性发生意外的变化,以及(3) 非目标年龄映射增加面部变异的不确定性。为了克服这些问题,本文件提议了一个名为AgeFlow的新框架,以整合流基模型和GANs的优势。提议的AgeFlow(GANs)包含三个部分:一个编码器,通过不可逆的神经网络将特定面部图象映射成潜伏空间空间的图象,一个新型不可逆的有条件翻译模块(ICTM),将源潜伏矢量矢量矢量矢量矢量转换成目标的矢量矢量变形。所有部分都不可逆地实现双倍的直射年龄图。ICTM的新方法。首先,我们提议一个比较容易地显示一个隐喻的AND层变的图像年龄变变格,同时将GAN的图像变换到另一个的特性变换到GIS变换到GNS变。我们的GND的图像的属性,在不断的图像变换到另一个的内,在不断的自我变换到GMA的内。我们的内,在不断变。我们的自我变的图像变的内,在不断的内。

1
下载
关闭预览

相关内容

【干货书】机器学习速查手册,135页pdf
专知会员服务
125+阅读 · 2020年11月20日
专知会员服务
86+阅读 · 2020年8月2日
disentangled-representation-papers
CreateAMind
26+阅读 · 2018年9月12日
Hierarchical Disentangled Representations
CreateAMind
4+阅读 · 2018年4月15日
视频超分辨 Detail-revealing Deep Video Super-resolution 论文笔记
统计学习与视觉计算组
17+阅读 · 2018年3月16日
条件GAN重大改进!cGANs with Projection Discriminator
CreateAMind
8+阅读 · 2018年2月7日
Auto-Encoding GAN
CreateAMind
7+阅读 · 2017年8月4日
强化学习族谱
CreateAMind
26+阅读 · 2017年8月2日
Logistic回归第二弹——Softmax Regression
机器学习深度学习实战原创交流
9+阅读 · 2015年10月29日
Arxiv
0+阅读 · 2021年7月6日
Arxiv
3+阅读 · 2020年7月16日
Arxiv
8+阅读 · 2018年5月1日
Arxiv
7+阅读 · 2018年1月21日
Arxiv
9+阅读 · 2018年1月4日
VIP会员
相关资讯
disentangled-representation-papers
CreateAMind
26+阅读 · 2018年9月12日
Hierarchical Disentangled Representations
CreateAMind
4+阅读 · 2018年4月15日
视频超分辨 Detail-revealing Deep Video Super-resolution 论文笔记
统计学习与视觉计算组
17+阅读 · 2018年3月16日
条件GAN重大改进!cGANs with Projection Discriminator
CreateAMind
8+阅读 · 2018年2月7日
Auto-Encoding GAN
CreateAMind
7+阅读 · 2017年8月4日
强化学习族谱
CreateAMind
26+阅读 · 2017年8月2日
Logistic回归第二弹——Softmax Regression
机器学习深度学习实战原创交流
9+阅读 · 2015年10月29日
相关论文
Top
微信扫码咨询专知VIP会员