AR/VR购物、社交等相当多的领域都需要对现实物体完成三维数字化,让用户带上AR/VR眼镜看见商品的立体图像,看到正在交流的好友的面容。
然而3D建模很难,目前尚且还没有一种兼具高精度和简易性的建模方式。
最理想的建模工具当然是人手一台的手机,假如打开摄像头绕着实物转上几圈就能完成3D建模,结合手机的AR功能,或许将对各行各业产生深远的影响。
计算机视觉公司Fyusion近日完成了2200万美元融资,宣布将利用其3D+AI成像技术,结合云计算,让手机成为移动AR内容创建平台,并为汽车行业、电商提供商品3D数字化服务。
此次Fyusion的投资方有国产手机厂商金立,而在以往华为、HTC也与其有过合作,早在2016年5月,华为推出的荣耀V8手机中,就内置了来自Fyusion的3D拍照模式。
Fyusion关注手机的3D拍照的时间更早,在2014年便上线了第一款3D拍照应用Fyuse,让用户能拍摄出带有空间特性的照片,用户拍摄时偏转手机,环绕拍摄目标,经过自动渲染就能制作出带有全景效果的照片。
下载了Fyuse的最新版本,它的效果怎么样呢?
打开APP界面点击拍摄按钮,进入拍摄界面。以拍摄物品为中心,出现四个箭头,代表能够以四个方向旋转镜头,环绕该物品进行拍摄。
相比之前仅能左右旋转的早起版本,应当能拍摄更为立体的图像。
转了好一会,拍摄完成,点击右下角的图片预览,屏幕上出现上图的网格状图案,不过图上的点似乎和物品并无相对应的关系。
拿着手机平移和旋转,能看到拍摄物品的各个角度。
单从目前的Fyuse手机端软件来看,拍摄效果还算不错,移动手机时图像变化平滑,不过不能并不能表现远近关系,图形旋转时也只是和拍摄时候的角度、距离如出一辙,更像是一个以拍摄角度为变化量的视频拍摄。
Fyuse看上去只是一个多角度对某物体拍摄然后进行拼接,并结合手机的IMU传感器,当手机旋转运动的时候呈现出图像的不同角度而已,和3D建模没什么关系。
Fyuse的定位应当和苹果的live photo类似,算得上是一种新奇的拍摄形式,但是不具备革命性的进步。
Fyusion的优点在于能使用任何摄像头,并且不限制平台的拍摄3D互动图像。几年的积累下来,通过和各大手机厂商的合作以及fyuse平台用户的大量拍摄(每周活跃用户超过1500万),积累了大量3D影像数据,通过积攒的数据训练机器学习,能够帮助技术进一步的发展。
通过AI,计算机视觉能够更好的透过2D图像理解拍摄物的空间结构。
Fyusion的技术还是具备相当不错的前景的,尽管比较简陋,但却是能够让手机端成为一个3D图像的创造工具,而随着AI的持续进步,拍摄的3D影像会更逼真。
比如下图这张,来自英国诺丁山大学及金斯敦大学的研究员的展示,仅仅通过单张2D图像,AI就能分析得到这张照片原主人的脸部立体形象。
在汽车销售、零售行业也会有很好的应用,Fyusion的定制汽车捕获应用程序或SDK允许使用iOS或Android手机拍摄4K画质的流畅的360°图像,而不需要专业摄影师和设备的要求,这样用户在线上能够更好的看车,为买家和卖家双方带来便利。
在电商领域,商家能够通过手机环绕拍摄商品,导出为3D VR/AR图像,方便消费者更好地了解商品。
阅读推荐