除了超分辨率,AI 结合 RTC 还有哪些技术实践?

2019 年 9 月 19 日 PaperWeekly


一说到 AI+RTC(Real-time Communication),大家第一个想起的可能就是超分辨率,它也是 CVPR 中备受关注的赛题之一。不过,它只是 AI 的应用场景之一。

2019 年 10 月 24 日 - 25 日,声网 Agora、极客邦科技、RTC 开发者社区、CSDN 将在北京联合举办第五届 RTC 实时互联网大会。本届大会邀请到了来自微软小冰搜狗语音交互技术中心依图科技Hulu数美科技等公司的一线技术、研发负责人,分享与语音交互智能感知系统NLP声纹识别视频内容检索与推荐编解码优化等相关的研究成果与实践经验。

而且,这场技术大会的门票正在限时免费中,点击「阅读原文」即可申请!

在这里,我们先剧透一些演讲议题: 

Topic:微软小冰实时感官系统与未来发展趋势

Speaker:刘成城 微软小冰研发总监


微软小冰是微软(亚洲)互联网工程院研发的人工智能机器人。微软小冰实时感官系统是微软小冰的线下实时交互平台,她具有多种实时识别和动态捕捉的能力,并可以用户进行实时交互。本次演讲将会对实时感官系统全方位深度剖析,并以之为例介绍实时感官系统的构成与应用,引领听众探索其未来发展趋势。

Topic:基于内容的视频推荐和实践

Speaker:谢晓辉 Hulu首席研发经理

视频网站面临的技术挑战之一是如何对视频做精准的用户分发,理解用户、环境和视频内容是解决问题的核心和关键。以头部视频为主的视频网站由于用户选择成本更高、消费行为稀疏、复杂而且感性,因此对视频进行精确、细致与丰富的理解和刻画显得更为重要。相比传统的基于用户行为的推荐系统,如何借助于视频内容理解来优化个性化推荐和内容发现呢?本次演讲内容将重点分享Hulu在这一方面的探索和实践经验,内容包括视频理解在内容冷启动、视频精细化标签和分组、深度推荐模型中的应用等等。

Topic:Deep Learning based Super Resolution for mobile RTC

Speaker:周世付 声网Agora AI 算法工程师

近几年,超分辨率技术一直是计算机视觉领域的一个热门话题,其应用前景广泛,比如RTC。然后,超分辨率技术在移动端落地的过程中,面临着模型过大、运算复杂、设备发热过大的问题。本次演讲内容将重点分享超分辨技术在移动端落地的探索和实践经验,内容包括对抗神经网络、模型剪枝压缩等。

Topic:基于深度学习实时直播内容风控

Speaker:关涛 数美研发中心总经理

随着互联网高速发展,直播场景日益丰富,违规音频视频图片已经泛滥成灾;同时国家内容监管日益趋严,监管政策集中出台,行政处罚愈发严格,实时内容风控日益重要,传统的人工方式也已经无法满足实时风控的需求,时代呼唤新的解决方案。数美基于深度学习技术,提出全栈式AI实时直播内容风控的解决方案,包括LSTM、RNN、CNN、GAN等深度学习模型,有效识别直播视频涉政、暴恐、涉黄等违规内容,保证内容合规,净化了网络环境。

同时,还将有嘉宾分享基于 AI 优化的实时音频体验通过 AI 优化音视频数据的实时传输等话题。

除了 AI 相关演讲以外,本届大会还设立多个技术专场以及 WebRTC 工作坊,大会日程如下: 

 参加大会你将收获……


一线团队的实践经验与最新技术趋势

提及 RTC 技术,大多数人首先想到的就是 WebRTC、音视频编解码。不过 RTC 技术还涉及 QoE、实时网络传输,而且正在与 AI、跨平台技术,甚至是 5G 碰撞出更多火花。

今年的内容主题涉及多项热门技术,包括 WebRTC、实时视频超分辨率算法、编解码技术标准、深度学习与音频优化、QoE、高并发网络架构、5G、实时感官系统、Flutter、ABR 算法、MPEG-DASH 等。
有些话题是音视频工程师们应该关注的新趋势,也有些实践经验是可被大多数架构师与应用工程师拿来参考的。
所以你将可能会听到 WebRTC 与深度学习 CV 算法的结合、基于 AI 优化的 AV1 编解码、VVC 编解码技术标准的未来、5G 网络下的视频体验优化、基于深度学习的实时直播内容风控、高并发实时信令以及在教育场景的应用,以及更多前沿的技术经验。

与全球一线团队的技术专家面对面

今年我们已经邀请到了来自 W3C、搜狗、微软小冰、VVC编解码标准组、字节跳动、Hulu、沪江 CCTalk、Bilibili、闲鱼、声网、Janus开源项目、AVS编解码标准组、上海交大等公司、组织机构的一线技术专家,有首席科学家、资深架构师、资深工程师,也有研究员,各位演讲人都总结过去一年中实际研发经验,告诉你哪里有坑,哪些技术、框架值得尝试,又有哪些实现逻辑。


1024 来交个朋友

1024 不仅仅是 RTC 大会的第一天,也是程序员的节日。这一天,又怎么能少了属于程序员的 After Party 呢?

在大会上完成一天的“充电”之后,我们将带着童心未泯的小伙伴们,一起玩耍!

 



往届 RTC 实时互联网大会

在往年的大会上,我们从传播 WebRTC 与实时传输架构,到现在分享 RTC 与更多技术的融合,以及在更多场景下的应用探索。 我们希望今年能让更多开发者了解、学习和体验到 RTC 技术的魅力。

 

往年大会现场

 

 RTC 2019 大会门票限时免费中,赶快报名吧!


Tips
现在 申请限时免费门票,还可获得150元的Workshop代金券哦~ 用劵之后 只需38元即可报名 Workshop ,不过席位有限,赶紧行动吧!
登录查看更多
1

相关内容

微软 Bing 搜索中国团队发布的一款智能聊天机器人。
轻量级神经网络架构综述
专知会员服务
96+阅读 · 2020年4月29日
【Google】监督对比学习,Supervised Contrastive Learning
专知会员服务
74+阅读 · 2020年4月24日
CMU博士论文:可微优化机器学习建模
专知会员服务
58+阅读 · 2019年10月26日
2019,值得你关注的三大AI趋势
AI前线
5+阅读 · 2018年12月18日
AI过气了?那是因为你还没看过这些实践
40+一线大厂AI落地案例指南|年终干货总结
InfoQ
8+阅读 · 2018年11月18日
阿里搜索技术,在AI路上走了多远?
机器学习研究会
11+阅读 · 2017年12月29日
百度NLP模块使用手册--深度直击最新进展
InfoQ
20+阅读 · 2017年10月30日
课程 | 推荐系统资深架构师在这里等你!
AI研习社
3+阅读 · 2017年9月7日
今日头条推荐系统架构演进之路
QCon
32+阅读 · 2017年6月21日
Learning in the Frequency Domain
Arxiv
11+阅读 · 2020年3月12日
Adaptive Neural Trees
Arxiv
4+阅读 · 2018年12月10日
Arxiv
22+阅读 · 2018年8月30日
Arxiv
14+阅读 · 2018年4月18日
VIP会员
相关资讯
2019,值得你关注的三大AI趋势
AI前线
5+阅读 · 2018年12月18日
AI过气了?那是因为你还没看过这些实践
40+一线大厂AI落地案例指南|年终干货总结
InfoQ
8+阅读 · 2018年11月18日
阿里搜索技术,在AI路上走了多远?
机器学习研究会
11+阅读 · 2017年12月29日
百度NLP模块使用手册--深度直击最新进展
InfoQ
20+阅读 · 2017年10月30日
课程 | 推荐系统资深架构师在这里等你!
AI研习社
3+阅读 · 2017年9月7日
今日头条推荐系统架构演进之路
QCon
32+阅读 · 2017年6月21日
相关论文
Learning in the Frequency Domain
Arxiv
11+阅读 · 2020年3月12日
Adaptive Neural Trees
Arxiv
4+阅读 · 2018年12月10日
Arxiv
22+阅读 · 2018年8月30日
Arxiv
14+阅读 · 2018年4月18日
Top
微信扫码咨询专知VIP会员