不会部署深度学习模型?腾讯优图大咖来教你

2020 年 6 月 13 日 CVer

点击上方“CVer”,选择加"星标"置顶

重磅干货,第一时间送达

6月10日,腾讯优图宣布其研发的推理组件TNN正式对外开源,直面能力分散、多平台不兼容等问题,该框架可开发注册包括ARM、METAL、OPENCL、NPU、CUDA等主流平台在内的多种推理平台,为开发人员提供统一的模型描述文件和调用接口,让企业一套流程就能部署到位,简单易用、省时省力。


https://github.com/Tencent/TNN

 

腾讯这款自研的推理组件TNN源自内部16年就开始研发的Rapidnet框架,后续借鉴了ncnn、MNN、MACE等开源框架高性能和易扩展的优点,并进一步提升。TNN的优秀已在手Q、微视、天天P图等APP中的美颜、美妆、魔法天空、光感染发、手势红包等功能的处理速度上得到了证实,其处理速度比当前业界开源框架平均快20%以上;同时,在腾讯云GPU服务器落地中,能够实现性能较业界主流框架提升50%以上。

 

以下是MNN, ncnn, TNN框架在多款主流平台的实测性能:




注:纵轴单位:ms  测试分支:MNN:1.0.0(2020.05.07),ncnn:20200413, TNN: master(2020.06.10)

测试模型:https://github.com/alohali/benchmark-models

 

如果这款推理组件正好能解决你目前遇到的问题,或者你对它有着极大的兴趣,那么CVer 强烈推荐你参加此次由腾讯优图主办的6月15日的线上沙龙,届时腾讯优图实验室资深研究员Darren将为大家解读【多场景适配:深度学习模型部署优化之道】的主题分享。将帮助大家全面了解这个深度学习推断框架的前世今生,辅助大家快速上手在不同场景下的模型部署优化能力。




扫描上图二维码即可免费报名参加

注:如果是学生,则把公司当做学校即可

 


扫描上图二维码添加小助手文文酱,回复关键字“优图”,入直播群


点击阅读原文即可免费预约观看直播,6月15日晚7点-8点,我们不见不散~

登录查看更多
1

相关内容

【干货书】高级应用深度学习,294页pdf
专知会员服务
151+阅读 · 2020年6月20日
模型优化基础,Sayak Paul,67页ppt
专知会员服务
75+阅读 · 2020年6月8日
【CVPR 2020-商汤】8比特数值也能训练卷积神经网络模型
专知会员服务
25+阅读 · 2020年5月7日
《人工智能2020:落地挑战与应对 》56页pdf
专知会员服务
195+阅读 · 2020年3月8日
【MIT深度学习课程】深度序列建模,Deep Sequence Modeling
专知会员服务
77+阅读 · 2020年2月3日
TensorFlow Lite指南实战《TensorFlow Lite A primer》,附48页PPT
专知会员服务
69+阅读 · 2020年1月17日
100+前沿“拿来即用”开源深度学习模型汇总分享
深度学习与NLP
11+阅读 · 2019年8月29日
【资源】深度学习模型压缩资源汇总
专知
38+阅读 · 2019年5月8日
模型、框架及应用:深度学习系列16讲
云栖社区
4+阅读 · 2018年3月12日
手把手带你玩转机器学习和深度学习
大数据技术
8+阅读 · 2018年1月3日
Deformable Style Transfer
Arxiv
14+阅读 · 2020年3月24日
Arxiv
5+阅读 · 2019年4月8日
Conditional BERT Contextual Augmentation
Arxiv
8+阅读 · 2018年12月17日
Viewpoint Estimation-Insights & Model
Arxiv
3+阅读 · 2018年7月3日
Arxiv
4+阅读 · 2018年6月5日
Arxiv
6+阅读 · 2018年4月3日
Arxiv
4+阅读 · 2016年12月29日
VIP会员
相关VIP内容
相关论文
Deformable Style Transfer
Arxiv
14+阅读 · 2020年3月24日
Arxiv
5+阅读 · 2019年4月8日
Conditional BERT Contextual Augmentation
Arxiv
8+阅读 · 2018年12月17日
Viewpoint Estimation-Insights & Model
Arxiv
3+阅读 · 2018年7月3日
Arxiv
4+阅读 · 2018年6月5日
Arxiv
6+阅读 · 2018年4月3日
Arxiv
4+阅读 · 2016年12月29日
Top
微信扫码咨询专知VIP会员