AR直播全方位身临其境阿里黑科技带你畅玩淘宝造物节

2017 年 7 月 8 日 云栖社区

2017年7月8日，为期五天的第二届淘宝造物节在杭州国际博览中心正式拉开序幕，作为淘宝一年一度，最好玩、最盛大的线下集市，淘宝造物节依靠技术上的新突破和内容创作上新模式，引导年轻人，鼓励他们创造出更多的内容、社群和流行趋势，通过全新的展示和交互技术释放他们的创新和创造力。

淘宝造物节-奇市江湖

7月1日，一封制作精良，效果逼真的3D邀请函《飞跃奇市江湖》火遍互联网，熟悉3D动画制作的朋友不难发现，这封3D邀请函主场景的开发上，不同于传统Web开发中使用CSS来实现的伪（有限）3D效果，而是使用WebGL来实现，更接近于传统图形领域的基于OpenGL的开发模式；在材质渲染及场景设计上，阿里巴巴技术团队通过编写编码级别的“地图编辑器”对整个地图进行了多次美化与性能调优，使得设计场景能够完美还原，并流畅运行于移动端上；在分场景设计上，采用基于WebGL的三维交互技术360全景视频，具有更快的开发效率以及更加精美极致的场景体验。为了最终在用户面前呈现影视级的视觉效果，项目全程更是邀请到好莱坞顶级特效制作团队FrameStore全程参与，首次用好莱坞视觉特效演绎效果超炫的淘宝造物节邀请函。

淘宝造物节邀请函-飞跃奇市江湖

AI算法助力互动体验打造二次元淘宝AR直播

作为互动体验的重要环节，本次淘宝造物节重点打造的AR直播则在用户体验上下足了功夫。这些互动背后融合了阿里巴巴技术团队在AI算法和AR直播两大技术领域的突破。综合运用3D空间重建、场景分割、物体跟踪与检测、交互式视频流、单目同时定位和建图等技术，打造了一个现实与虚拟水乳交融的奇幻场景。让线上线下参与互动的现场观众既能感受到大鱼海棠身临其境的感觉，也能变身小怪兽和奥特曼扭作一团，或者亲切抱抱。

淘宝造物节-AR直播

相对于上一代的VR直播，AR直播能够突破空间和设备的限制，通过在AI算法上的不断优化，做到智能监测和场景感知，构建一个实时强互动的现实虚拟相叠加的场景，大大拓展了数字媒体和娱乐业务的传播形态。

在此次淘宝造物节的AR直播会场，阿里巴巴技术团队通过对视频流进行分析，检测并提取现场画面中的关键人物，并发送到远程进行虚拟互动。另外通过基于深度信息的图形合成技术，还实现了远程和现实人物的有效互动，用户足不出户也能通过手机观看和参与现场AR直播互动，体验一个独一无二亦真亦幻的世界。

无独有偶，作为互联网时代下零售业变革主要方向，线上线下融合的“新零售”业态，无人店铺“淘咖啡”也在此次淘宝造物节上亮相。“淘咖啡”涉及的技术包括身份识别、移动支付、人工智能等方面。此外，本次淘宝造物节上，作为阿里移动基础技术引擎（Alibaba Mobile Tech Engine，简写为AMTE）的重要组成部分，Weex框架很好地支撑了此次淘宝造物节的主会场。

正如阿里巴巴集团CEO张勇所说，整个中国经济和商业都在走向数字经济，走向新零售。作为”五新”战略的重点之一，借力于技术创新的新零售亦将成为未来商业变革成败的关键。从去年的Buy+和VR直播，到今年交互动画加纯3D建模的飞跃奇市江湖邀请函，再到现场AR全景互动直播，黑科技满满的淘宝造物节让技术带来商业价值的同时，也让更多人的真实生活受益、更加快乐，并且让社会得到可持续发展。

如果说双11天猫狂欢节更多体现的是阿里巴巴在云计算、大数据和电商领域世界级的互联网技术能力，那一年一度的淘宝造物节则成为阿里巴巴在新零售场景下移动和AR/VR等新交互技术领域的练兵场。

淘宝造物节现场更多精彩花絮，快来现场一探究竟？