除了超分辨率，AI 结合 RTC 还有哪些技术实践？

2019 年 9 月 19 日 PaperWeekly

一说到 AI+RTC（Real-time Communication），大家第一个想起的可能就是超分辨率，它也是 CVPR 中备受关注的赛题之一。不过，它只是 AI 的应用场景之一。

2019 年 10 月 24 日 - 25 日，声网 Agora、极客邦科技、RTC 开发者社区、CSDN 将在北京联合举办第五届 RTC 实时互联网大会。本届大会邀请到了来自微软小冰、搜狗语音交互技术中心、依图科技、Hulu、数美科技等公司的一线技术、研发负责人，分享与语音交互、智能感知系统、NLP、声纹识别、视频内容检索与推荐、编解码优化等相关的研究成果与实践经验。

而且，这场技术大会的门票正在限时免费中，点击「阅读原文」即可申请！

在这里，我们先剧透一些演讲议题：

Topic：微软小冰实时感官系统与未来发展趋势

Speaker：刘成城微软小冰研发总监

微软小冰是微软（亚洲）互联网工程院研发的人工智能机器人。微软小冰实时感官系统是微软小冰的线下实时交互平台，她具有多种实时识别和动态捕捉的能力，并可以用户进行实时交互。本次演讲将会对实时感官系统全方位深度剖析，并以之为例介绍实时感官系统的构成与应用，引领听众探索其未来发展趋势。

Topic：基于内容的视频推荐和实践

Speaker：谢晓辉 Hulu首席研发经理

视频网站面临的技术挑战之一是如何对视频做精准的用户分发，理解用户、环境和视频内容是解决问题的核心和关键。以头部视频为主的视频网站由于用户选择成本更高、消费行为稀疏、复杂而且感性，因此对视频进行精确、细致与丰富的理解和刻画显得更为重要。相比传统的基于用户行为的推荐系统，如何借助于视频内容理解来优化个性化推荐和内容发现呢？本次演讲内容将重点分享Hulu在这一方面的探索和实践经验，内容包括视频理解在内容冷启动、视频精细化标签和分组、深度推荐模型中的应用等等。

Topic：Deep Learning based Super Resolution for mobile RTC

Speaker：周世付声网Agora AI 算法工程师

近几年，超分辨率技术一直是计算机视觉领域的一个热门话题，其应用前景广泛，比如RTC。然后，超分辨率技术在移动端落地的过程中，面临着模型过大、运算复杂、设备发热过大的问题。本次演讲内容将重点分享超分辨技术在移动端落地的探索和实践经验，内容包括对抗神经网络、模型剪枝压缩等。

Topic：基于深度学习实时直播内容风控

Speaker：关涛数美研发中心总经理

随着互联网高速发展，直播场景日益丰富，违规音频视频图片已经泛滥成灾；同时国家内容监管日益趋严，监管政策集中出台，行政处罚愈发严格，实时内容风控日益重要，传统的人工方式也已经无法满足实时风控的需求，时代呼唤新的解决方案。数美基于深度学习技术，提出全栈式AI实时直播内容风控的解决方案，包括LSTM、RNN、CNN、GAN等深度学习模型，有效识别直播视频涉政、暴恐、涉黄等违规内容，保证内容合规，净化了网络环境。

同时，还将有嘉宾分享基于 AI 优化的实时音频体验、通过 AI 优化音视频数据的实时传输等话题。

除了 AI 相关演讲以外，本届大会还设立多个技术专场以及 WebRTC 工作坊，大会日程如下：