【泡泡一分钟】基于点和体积融合的动态场景实时三维重建

2019 年 1 月 1 日 泡泡机器人SLAM

每天一分钟,带你读遍机器人顶级会议文章

标题:A Maximum Likelihood Approach to Extract Polylines
from 2-D Laser Range Scans

作者:Alexander Schaefer, Daniel Büscher, Lukas Luft, Wolfram Burgard

来源:2018 IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS)

编译:王丹

审核:颜青松,陈世浪

欢迎个人转发朋友圈;其他机构或自媒体如需转载,后台留言申请授权

摘要

使用Kinect或Xtion等低成本商品传感器进行实时3D重建已成功应用于增强现实,机器人遥操作和医疗诊断等广泛领域。由于静态场景的假设,诸如KinectFusion、KinFu等流行的3D重建技术,发现用快速运动摄像机进行真实重建或分割运动物体是一个挑战。在本文中,我们提出了一个加权迭代最近点(ICP)算法,该算法使用深度和RGB信息来提高相机跟踪的稳定性。另外,结合深度、法线和强度等级相似性标准的基于GPU的区域生长方法也被应用于准确地分割前景移动对象。为了实现实时处理和GPU的存储效率,我们设计了基于点的表示和体表示的组合来分别重建运动对象和静态场景。定性和定量结果均表明,本文提出的方法提高了摄像机跟踪和运动目标分割的实时性,降低了计算复杂度。

KinectFusion能够仅使用深度信息实时地对静态室内环境进行三维重建,具有五个主要的处理步骤,如图1所示,1)使用双边滤波器进行深度图细化。2)基于固有传感器矩阵的数据测量。3)ICP算法优化姿态估计。4)使用TSDF方法的表面重建。5)用于表面预测的光线投射。

图1 KinectFusion/KinFu的处理步骤


为了补偿深度测量中的系统误差,我们在几何姿态估计中为每个深度值分配一个权重指示器。考虑到相机运动较快时姿态估计的误差增大,用L1范数距离代替L2范数距离,降低了光度量优化的权重比。为了解决基于点的融合问题,我们将半径图和置信度计数器扩展到三维,并结合基于点的融合和体积表示来维持重建质量水平,同时减少处理时间和内存使用。我们还包括法线和强度贴图以及深度贴图作为相似属性,以提高区域生长方法的准确性,并在GPU上实现它以保持其处理速度。然后将基于点的动态部分重建与基于体素的静态背景重建相结合。将前景移动对象同时重建并逐帧地添加到全局模型中。

图2 所提方法的处理步骤


表1 KINFU,Point-based Fusion,ElasticFusion,本文方法在TUM数据集上的ATE,RPE比较


图3 (a)KinFu, (b) ElasticFusion(c)本文方法在“Plant”数据集上的三维重建结果比较

Abstract 

Real-time   3D   reconstruction   using   low-cost commodity  sensors like  Kinect  or  Xtion  has been  successfully appliedin a wide rangeof fields like augmented reality, robotic teleoperation,and  medical  diagnosis.  Due  to  the  assumption  of staticscene,  popular  3D  reconstruction  technologies  such  as KinectFusion and KinFu, find truthful reconstruction with fast motion camera or segmenting a moving object to be a challenge. In this paper, we propose a weighted iterative closest point (ICP)algorithm that uses both depth and RGB informationto enhance the  stability  of  camera  tracking. Additionally,aGPU-based region   growing   methodthat   combinesdepth, normaland intensity  levelas similarity criteria, is also applied  to  segment foreground moving objectsaccurately. For real-time processing and  GPU  memory  efficiency,  we also  designa  combination  of point-based   and   volumetric   representation   to   reconstruct moving  objectsand  static  scene,  respectively.    Both  qualitative and   quantitative   results   showthat   our   proposed   method improves  real-time  3D  reconstruction on  the  performance  of camera  tracking  and  segmentation  ofmoving  objectswith reduced computational complexity.



如果你对本文感兴趣,想要下载完整文章进行阅读,可以关注【泡泡机器人SLAM】公众号(paopaorobot_slam)

欢迎来到泡泡论坛,这里有大牛为你解答关于SLAM的任何疑惑。

有想问的问题,或者想刷帖回答问题,泡泡论坛欢迎你!

泡泡网站:www.paopaorobot.org

泡泡论坛:http://paopaorobot.org/bbs/


泡泡机器人SLAM的原创内容均由泡泡机器人的成员花费大量心血制作而成,希望大家珍惜我们的劳动成果,转载请务必注明出自【泡泡机器人SLAM】微信公众号,否则侵权必究!同时,我们也欢迎各位转载到自己的朋友圈,让更多的人能进入到SLAM这个领域中,让我们共同为推进中国的SLAM事业而努力!

商业合作及转载请联系liufuqiang_robot@hotmail.com

登录查看更多
1

相关内容

在计算机视觉中, 三维重建是指根据单视图或者多视图的图像重建三维信息的过程. 由于单视频的信息不完全,因此三维重建需要利用经验知识. 而多视图的三维重建(类似人的双目定位)相对比较容易, 其方法是先对摄像机进行标定, 即计算出摄像机的图象坐标系与世界坐标系的关系.然后利用多个二维图象中的信息重建出三维信息。 物体三维重建是计算机辅助几何设计(CAGD)、计算机图形学(CG)、计算机动画、计算机视觉、医学图像处理、科学计算和虚拟现实、数字媒体创作等领域的共性科学问题和核心技术。在计算机内生成物体三维表示主要有两类方法。一类是使用几何建模软件通过人机交互生成人为控制下的物体三维几何模型,另一类是通过一定的手段获取真实物体的几何形状。前者实现技术已经十分成熟,现有若干软件支持,比如:3DMAX、Maya、AutoCAD、UG等等,它们一般使用具有数学表达式的曲线曲面表示几何形状。后者一般称为三维重建过程,三维重建是指利用二维投影恢复物体三维信息(形状等)的数学过程和计算机技术,包括数据获取、预处理、点云拼接和特征分析等步骤。
基于视觉的三维重建关键技术研究综述
专知会员服务
160+阅读 · 2020年5月1日
【人大】图实现算法综述与评测分析
专知会员服务
37+阅读 · 2020年4月28日
专知会员服务
31+阅读 · 2020年4月24日
专知会员服务
41+阅读 · 2020年2月20日
专知会员服务
86+阅读 · 2019年12月13日
【泡泡一分钟】基于表面的自主三维建模探索
泡泡机器人SLAM
9+阅读 · 2019年9月10日
【泡泡一分钟】利用四叉树加速的单目实时稠密建图
泡泡机器人SLAM
28+阅读 · 2019年4月26日
【泡泡一分钟】动态环境下的高效长时间建图
泡泡机器人SLAM
6+阅读 · 2019年2月1日
【泡泡一分钟】视觉惯性里程计的信息稀疏化(IROS-2018)
泡泡机器人SLAM
9+阅读 · 2018年12月31日
【泡泡一分钟】动态环境下稳健的单目SLAM
泡泡机器人SLAM
13+阅读 · 2018年3月22日
Arxiv
3+阅读 · 2018年4月9日
Arxiv
4+阅读 · 2017年11月4日
VIP会员
相关VIP内容
相关资讯
【泡泡一分钟】基于表面的自主三维建模探索
泡泡机器人SLAM
9+阅读 · 2019年9月10日
【泡泡一分钟】利用四叉树加速的单目实时稠密建图
泡泡机器人SLAM
28+阅读 · 2019年4月26日
【泡泡一分钟】动态环境下的高效长时间建图
泡泡机器人SLAM
6+阅读 · 2019年2月1日
【泡泡一分钟】视觉惯性里程计的信息稀疏化(IROS-2018)
泡泡机器人SLAM
9+阅读 · 2018年12月31日
【泡泡一分钟】动态环境下稳健的单目SLAM
泡泡机器人SLAM
13+阅读 · 2018年3月22日
Top
微信扫码咨询专知VIP会员