Color transfer, which plays a key role in image editing, has attracted noticeable attention recently. It has remained a challenge to date due to various issues such as time-consuming manual adjustments and prior segmentation issues. In this paper, we propose to model color transfer under a probability framework and cast it as a parameter estimation problem. In particular, we relate the transferred image with the example image under the Gaussian Mixture Model (GMM) and regard the transferred image color as the GMM centroids. We employ the Expectation-Maximization (EM) algorithm (E-step and M-step) for optimization. To better preserve gradient information, we introduce a Laplacian based regularization term to the objective function at the M-step which is solved by deriving a gradient descent algorithm. Given the input of a source image and an example image, our method is able to generate continuous color transfer results with increasing EM iterations. Various experiments show that our approach generally outperforms other competitive color transfer methods, both visually and quantitatively.


翻译:在图像编辑中起着关键作用的彩色转换最近引起了人们的注意。 由于诸如耗时的手工调整和先前的分割问题等各种问题,它至今仍是一个挑战。 在本文中,我们提议在概率框架下建模彩色转换,并把它作为一个参数估计问题。 特别是,我们将传动的图像与高山混合模型(GMMM)下的示例图像联系起来,并将传动的图像颜色视为GMM机器人。 我们在优化时使用期望-最大化算法(E-step和M-step) 。 为了更好地保存梯度信息,我们将基于拉普拉西亚的正规化术语引入M-step的目标函数,该函数通过生成梯度下降算法解决。考虑到源图像和示例图像的投入,我们的方法能够产生连续的彩色转换结果,同时增加EM iteration。 各种实验显示,我们的方法一般都比其他竞争性的彩色转换方法(包括视觉和定量)。

0
下载
关闭预览

相关内容

Linux导论,Introduction to Linux,96页ppt
专知会员服务
78+阅读 · 2020年7月26日
Fariz Darari简明《博弈论Game Theory》介绍,35页ppt
专知会员服务
109+阅读 · 2020年5月15日
强化学习最新教程,17页pdf
专知会员服务
174+阅读 · 2019年10月11日
【哈佛大学商学院课程Fall 2019】机器学习可解释性
专知会员服务
103+阅读 · 2019年10月9日
【SIGGRAPH2019】TensorFlow 2.0深度学习计算机图形学应用
专知会员服务
39+阅读 · 2019年10月9日
灾难性遗忘问题新视角:迁移-干扰平衡
CreateAMind
17+阅读 · 2019年7月6日
Hierarchically Structured Meta-learning
CreateAMind
26+阅读 · 2019年5月22日
Transferring Knowledge across Learning Processes
CreateAMind
27+阅读 · 2019年5月18日
Unsupervised Learning via Meta-Learning
CreateAMind
42+阅读 · 2019年1月3日
meta learning 17年:MAML SNAIL
CreateAMind
11+阅读 · 2019年1月2日
Disentangled的假设的探讨
CreateAMind
9+阅读 · 2018年12月10日
【SIGIR2018】五篇对抗训练文章
专知
12+阅读 · 2018年7月9日
Hierarchical Disentangled Representations
CreateAMind
4+阅读 · 2018年4月15日
推荐|Andrew Ng计算机视觉教程总结
全球人工智能
3+阅读 · 2017年11月23日
【学习】Hierarchical Softmax
机器学习研究会
4+阅读 · 2017年8月6日
Arxiv
13+阅读 · 2021年7月20日
Arxiv
17+阅读 · 2021年2月15日
Deformable Style Transfer
Arxiv
14+阅读 · 2020年3月24日
Arxiv
6+阅读 · 2019年11月14日
Arxiv
4+阅读 · 2018年4月17日
Arxiv
3+阅读 · 2018年4月10日
VIP会员
相关VIP内容
相关资讯
灾难性遗忘问题新视角:迁移-干扰平衡
CreateAMind
17+阅读 · 2019年7月6日
Hierarchically Structured Meta-learning
CreateAMind
26+阅读 · 2019年5月22日
Transferring Knowledge across Learning Processes
CreateAMind
27+阅读 · 2019年5月18日
Unsupervised Learning via Meta-Learning
CreateAMind
42+阅读 · 2019年1月3日
meta learning 17年:MAML SNAIL
CreateAMind
11+阅读 · 2019年1月2日
Disentangled的假设的探讨
CreateAMind
9+阅读 · 2018年12月10日
【SIGIR2018】五篇对抗训练文章
专知
12+阅读 · 2018年7月9日
Hierarchical Disentangled Representations
CreateAMind
4+阅读 · 2018年4月15日
推荐|Andrew Ng计算机视觉教程总结
全球人工智能
3+阅读 · 2017年11月23日
【学习】Hierarchical Softmax
机器学习研究会
4+阅读 · 2017年8月6日
相关论文
Arxiv
13+阅读 · 2021年7月20日
Arxiv
17+阅读 · 2021年2月15日
Deformable Style Transfer
Arxiv
14+阅读 · 2020年3月24日
Arxiv
6+阅读 · 2019年11月14日
Arxiv
4+阅读 · 2018年4月17日
Arxiv
3+阅读 · 2018年4月10日
Top
微信扫码咨询专知VIP会员