为了实现全息通讯，科学家们正在努力求解

注：本文译自Partnership yields key breakthroughs in VR’s “grand challenge”，点击阅读原文或复制网址 https://www.microsoft.com/en-us/research/blog/partnership-yields-key-breakthroughs-vr-grand-challenge/ 至浏览器中打开即可查看。

“虚拟现实”（VR）这个概念大家已经不再陌生，作为潜力巨大的新兴技术，VR有望颠覆工业设计、医学等诸多专业的研究方向和领域。早在2008年，美国国家工程院便评选出“21世纪十四大工程挑战”，“改进虚拟现实”这一挑战便赫然其中，与之同在的还有“预防核恐怖”和“保护网络空间”等重要挑战，虚拟现实的重要地位可见一斑。正因如此，微软才一直致力于改进和创新VR和3D沉浸式通讯方式，并将该技术应用于微软Kinect Xbox 360传感器、Surface Hub、HoloLens和Windows Creator等微软的产品和服务中。

学术合作

让虚拟现实技术真正走进人们的生活、实现更加沉浸式的沟通建立在3D几何捕捉和信号传输技术的革新上，而这是建立在十几年如一日长期的基础研究上的。因此，微软启动了名为CORE（collaborative research）的学术合作项目，来自日本国家信息学研究所副教授Gene Cheung博士便是该学术合作项目的合作伙伴之一，而他本人多年来也致力于解决上述问题。

Gene Cheung博士  日本国家信息学研究所副教授

共赢突破

利用Kinect传感器等深度感测设备，研究人员开发了一种可以更好地为图像降噪并复原图像细节的算法。更重要的是，他们发明了利用自然图像和深度图像增强图像信号平滑度的方法，这一发明可谓是该领域内的重大突破。

图：使用我们的方法（右）原始4位图像（左）和位深度增强图像到8位的示例

微软研究院资深研究员Dinei Florencio与Gene Cheung博士的合作研究“速率限制3D表面估计”和“多维3D深度图的精确增强”已有一定的进展。“这两条研究线是我们最近合作中最活跃的，”Florenicio说。“我们正向更好的沉浸式通信体验一步步迈进，我相信Gene的研究能带来一些非常基础的贡献。该项目的其他核心成员还包括微软研究院的张察和香港科技大学毕业的万鹏飞。

未来

Florencio和Chueng正引领主动光传感是否可以准确检测信息性生物信号方面的研究，例如面部的脉搏、呼吸频率和体温的变化 ，以此分析对受试者情绪，判断其是否撒谎。在这个项目中，研究员们需要解决的首要问题则是能否扩展主动光感测试以揭示阴影或远距离人类受试者的相同细节。

微软研究院资深研究员梅涛表示：“这个项目非常有趣，因为它试图通过生物信号以实现更有效的面对面交流。”该项目负责人Cheung教授提出一种新颖的想法，使用完全非接触和非侵入性的主动成像，通过分析室内有源图像传感系统中构造的温度图像和深度图像来解决这个问题。

 

Cheung教授计划在项目完成后公开该研究工具。我们期待着这次合作能有更多的进步和成就，同时也希望研究人员探索这一领域，拓展虚拟现实技术的前沿，早日实现《星球大战》中莱娅公主全息通话的愿景。

你也许还想看：

• 从“火车进站”到虚拟现实：电影艺术与视觉技术的罗曼史

• 为什么我们要让人工智能玩游戏：微软Project AIX

• 对话|首席研究员童欣：从长远看，AR的应用范围远比VR广泛

感谢你关注“微软研究院AI头条”，我们期待你的留言和投稿，共建交流平台。来稿请寄：msraai@microsoft.com。

微软小冰进驻微软研究院微信啦！快去主页和她聊聊天吧。