赋予机器以感知三维世界的能力,就像我们人类一样,是人工智能领域一个基本且长期存在的主题。给定不同类型的视觉输入,如二维/三维传感器获取的图像或点云,一个重要的目标是理解三维环境的几何结构和语义。传统的方法通常利用手工特征来估计物体或场景的形状和语义。然而,他们很难推广到新的对象和场景,并努力克服关键问题造成的视觉遮挡。相比之下,我们的目标是理解场景和其中的对象,通过学习一般和鲁棒的表示使用深度神经网络,训练在大规模的真实世界3D数据。为了实现这些目标,本文从单视图或多视图的物体级三维形状估计到场景级语义理解三个方面做出了核心贡献。

在第3章中,我们从一张图像开始估计一个物体的完整三维形状。利用几何细节恢复密集的三维图形,提出一种强大的编码器解码器结构,并结合对抗式学习,从大型三维对象库中学习可行的几何先验。在第4章中,我们建立了一个更通用的框架来从任意数量的图像中精确地估计物体的三维形状。通过引入一种新的基于注意力的聚合模块和两阶段的训练算法,我们的框架能够集成可变数量的输入视图,预测稳健且一致的物体三维形状。在第5章中,我们将我们的研究扩展到三维场景,这通常是一个复杂的个体对象的集合。现实世界的3D场景,例如点云,通常是杂乱的,无结构的,闭塞的和不完整的。在借鉴以往基于点的网络工作的基础上,我们引入了一种全新的端到端管道来同时识别、检测和分割三维点云中的所有对象。

总的来说,本文开发了一系列新颖的数据驱动算法,让机器感知我们真实的3D环境,可以说是在推动人工智能和机器理解的边界。

https://ora.ox.ac.uk/objects/uuid:5f9cd30d-0ee7-412d-ba49-44f5fd76bf28

成为VIP会员查看完整内容
62

相关内容

牛津大学是一所英国研究型大学,也是罗素大学集团、英国“G5超级精英大学”,欧洲顶尖大学科英布拉集团、欧洲研究型大学联盟的核心成员。牛津大学培养了众多社会名人,包括了27位英国首相、60位诺贝尔奖得主以及数十位世界各国的皇室成员和政治领袖。2016年9月,泰晤士高等教育发布了2016-2017年度世界大学排名,其中牛津大学排名第一。

【牛津大学博士论文】解释深度神经网络,134页pdf
专知会员服务
213+阅读 · 2020年10月8日
【斯坦福大学博士论文】自监督场景表示学习, 97页pdf
专知会员服务
92+阅读 · 2020年6月19日
机器学习速查手册,135页pdf
专知会员服务
335+阅读 · 2020年3月15日
图数据表示学习综述论文
专知
51+阅读 · 2019年6月10日
自然语言处理常识推理综述论文,60页pdf
专知
69+阅读 · 2019年4月4日
CVPR 2018 最酷的十篇论文
AI研习社
6+阅读 · 2019年2月13日
【学界】对抗式协作:一个框架解决多个无监督学习视觉问题
GAN生成式对抗网络
3+阅读 · 2018年6月30日
Arxiv
6+阅读 · 2018年4月3日
VIP会员
微信扫码咨询专知VIP会员