Depth estimation from monocular images is an important task in localization and 3D reconstruction pipelines for bronchoscopic navigation. Various supervised and self-supervised deep learning-based approaches have proven themselves on this task for natural images. However, the lack of labeled data and the bronchial tissue's feature-scarce texture make the utilization of these methods ineffective on bronchoscopic scenes. In this work, we propose an alternative domain-adaptive approach. Our novel two-step structure first trains a depth estimation network with labeled synthetic images in a supervised manner; then adopts an unsupervised adversarial domain feature adaptation scheme to improve the performance on real images. The results of our experiments show that the proposed method improves the network's performance on real images by a considerable margin and can be employed in 3D reconstruction pipelines.


翻译:单眼图像的深度估计是支气管导航本地化和三维重建管道的重要任务。各种受监督和自我监督的深层次学习方法证明了自己在自然图像的任务上的作用。然而,由于缺乏贴有标签的数据和支气管组织特质腐蚀质素,这些方法在支气管图象上无法有效使用。在这项工作中,我们建议了一种替代的域适应方法。我们的新颖的两步结构首先用有标签的合成图象在监督下训练一个深度估计网络;然后采用一种不受监督的对抗性域特征适应计划来改善真实图像的性能。我们的实验结果表明,拟议的方法可以大大改善网络在实际图像上的性能,并可用于3D重建管道。

0
下载
关闭预览

相关内容

专知会员服务
45+阅读 · 2020年10月31日
【Google】平滑对抗训练,Smooth Adversarial Training
专知会员服务
49+阅读 · 2020年7月4日
[综述]深度学习下的场景文本检测与识别
专知会员服务
78+阅读 · 2019年10月10日
CVPR 2019 | 34篇 CVPR 2019 论文实现代码
AI科技评论
21+阅读 · 2019年6月23日
CVPR 2019 | 重磅!34篇 CVPR2019 论文实现代码
AI研习社
11+阅读 · 2019年6月21日
Unsupervised Learning via Meta-Learning
CreateAMind
43+阅读 · 2019年1月3日
gan生成图像at 1024² 的 代码 论文
CreateAMind
4+阅读 · 2017年10月31日
Adversarial Variational Bayes: Unifying VAE and GAN 代码
CreateAMind
7+阅读 · 2017年10月4日
Auto-Encoding GAN
CreateAMind
7+阅读 · 2017年8月4日
Arxiv
4+阅读 · 2018年4月17日
Arxiv
11+阅读 · 2018年3月23日
VIP会员
Top
微信扫码咨询专知VIP会员