In this paper, we propose a novel two-stage context-aware network named CANet for shadow removal, in which the contextual information from non-shadow regions is transferred to shadow regions at the embedded feature spaces. At Stage-I, we propose a contextual patch matching (CPM) module to generate a set of potential matching pairs of shadow and non-shadow patches. Combined with the potential contextual relationships between shadow and non-shadow regions, our well-designed contextual feature transfer (CFT) mechanism can transfer contextual information from non-shadow to shadow regions at different scales. With the reconstructed feature maps, we remove shadows at L and A/B channels separately. At Stage-II, we use an encoder-decoder to refine current results and generate the final shadow removal results. We evaluate our proposed CANet on two benchmark datasets and some real-world shadow images with complex scenes. Extensive experimental results strongly demonstrate the efficacy of our proposed CANet and exhibit superior performance to state-of-the-arts.


翻译:在本文中,我们提出一个新的两阶段背景认知网络,名为“CANET”,用于清除阴影,其中非阴影区域的背景资料被转移到嵌入的特征空间的阴影区域。在第一阶段,我们提议一个背景匹配模块(CPM),以产生一套潜在的影子和非阴影区域对匹配的配对。结合阴影区域与非阴影区域之间的潜在背景关系,我们精心设计的背景特征传输(FLT)机制可以在不同尺度上从非阴影区域向阴影区域转移背景信息。在重建的地貌图中,我们将L和A/B频道的阴影分别转移到阴影区域。在第二阶段,我们使用编码码解码器来完善当前的结果并产生最后的阴影清除结果。我们用两个基准数据集和一些真实世界的影子图像来评估我们拟议的CANet和一些复杂的场景。广泛的实验结果有力地显示了我们提议的CANet的功效,并将优异的性表现展示给最新艺术。

0
下载
关闭预览

相关内容

【图神经网络导论】Intro to Graph Neural Networks,176页ppt
专知会员服务
125+阅读 · 2021年6月4日
 【SIGGRAPH 2020】人像阴影处理,Portrait Shadow Manipulation
专知会员服务
28+阅读 · 2020年5月19日
【ICLR-2020】网络反卷积,NETWORK DECONVOLUTION
专知会员服务
38+阅读 · 2020年2月21日
Stabilizing Transformers for Reinforcement Learning
专知会员服务
58+阅读 · 2019年10月17日
内涵网络嵌入:Content-rich Network Embedding
我爱读PAMI
4+阅读 · 2019年11月5日
Hierarchically Structured Meta-learning
CreateAMind
26+阅读 · 2019年5月22日
CornerNet: Detecting Objects as Paired Keypoints 论文笔记
统计学习与视觉计算组
7+阅读 · 2018年9月27日
disentangled-representation-papers
CreateAMind
26+阅读 · 2018年9月12日
Hierarchical Imitation - Reinforcement Learning
CreateAMind
19+阅读 · 2018年5月25日
已删除
将门创投
3+阅读 · 2017年10月27日
VIP会员
Top
微信扫码咨询专知VIP会员