成为VIP会员查看完整内容
VIP会员码认证
首页
主题
发现
会员
服务
注册
·
登录
0
旷视深度学习框架 MegEngine 3 月底开源,开源生态将迎新变量
2020 年 3 月 2 日
AI科技评论
作者 | 张梦华
编辑 | 贾伟
开源越来越被证明为大势所向。近日,国内计算机视觉企业旷视传出,
最快将在 3 月底开源其基于计算平台 Brain++ 的深度学习框架 MegEngine 。
届时,复工、开学的企业、学生开发者们也将获得更多选择。
旷视CEO 印奇曾公开表示:“深度学习是旷视的核心竞争力,也是支撑人工智能革命的关键。”其在深度学习中的重要驱动便是 Brain++ 。
2019 年的世界互联网大会上,旷视在入选“国家新一代图像感知人工智能开放创新平台”的同时,发布了端到端的人工智能算法平台 Brain++,后者集成了数据管理、自动化算法研发和算力调度能力,其架构主要包括三部分:作为主体的深度学习算法开发框架 MegEngine ,提供算力支持的 MegCompute,提供数据支持的 MegData 。
今年已经成立近 9 个年头的旷视
一直聚焦计算机视觉,因此,和目前通用的深度学习框架相比,MegEngine 更垂直于计算机视觉应用,加上近几年公司在物联网产业不断提速的商业落地,从众多业务场景中获取的数据能力也给予了 MegEngine 更扎实的应用能力。而开源也意味着,作为视觉领域的头部级公司,旷视已经在建设自己的开发者生态上做足了准备。
开源成为人工智能下一阶段发展新趋势
2012 年后,深度学习的发展带动人工智能进入拐点,前者拥有高于传统机器学习十倍、百倍的神经网络参数,在人工智能最先落地的语音识别、图像识别领域,深度学习都是不可或缺的重要工具。商业落地中的数据反哺,也带动了算力、框架上的不断升级。开发者口中通用的深度学习开源框架基本不出这几种:TensorFlow、 PyTorch、Caffe、CNTK、ONNX 等,这背后又分别站着谷歌、Facebook、微软等巨头。
在国内,业内的共识近几年不断被强化,即人工智能给了中国企业、产业弯道超车的机会,但如果在人工智能发展中重要的深度学习中一直处于被动,前者的概率也将被大大压缩。
而除去开发工具的语言问题,安全性、适用性等需求也在倒逼中国企业在深度学习框架上建立自己的领地,国内头部企业已在此做出不少投入:
比如2016 年 8 月底,百度在宣布 “All in AI ” 的前一年,开源了自研深度学习平台 PaddlePaddle;2018 年 10 月,华为发布了自研深度学习框架 MindSpore ,虽然没有官宣,但关于其开源的消息已经出现不少雨点。
有头部公司的示范效应,起家于AI 的旷视,相比大厂在AI 人才、数据、算法上有更深的积淀,要在开源上出一份力也不足为奇。鉴于开源在企业人才贡献、代码维护、企业文化、技术影响力等方面的正面效应,势必也将有越来越多的互联网和科技企业加入中国开源生态的建设中来。
旷视 MegEngine 亮点前瞻
历经近6年的打磨,MegEngine 的框架一直紧跟旷视的应用场景调整升级,尤其针对国内需求,相比 TensorFlow、PyTorch 适用性更加突出。
整体上,Brain++ 可针对视觉任务定制化优化,更好满足大量图像及视频训练,完成图像分类、物体检测、物体场景分割、影像分析等复杂的视觉任务。
值得一提的是,作为 Brain++ 最为核心的引擎框架,MegEngine 配备了 AutoML 技术,将深度神经网络设计、参数调整及设备适配等过程自动化,提高开发效率,同时可智能调度平台硬件基础设施的计算能力,支持数百名研究人员同时在数万个 GPU 芯片上执行从数百到数千个训练任务。
旷视从 2014 年开始,内部成立了“Engine”小组自研深度学习框架,经过5年多的打磨和实践,MegEngine 已经逐渐成为支撑其算法研究开发的底层平台,并在旷视实现全员使用。近几年,旷视的计算机视觉技术在智慧城市、智慧物流、智慧零售中的落地逐渐加快,其算力及深度学习框架也在海量数据的补给中更加茁壮。
据了解,MegEngine 基于C++开发,可帮助用户借助编程语言进行高性能的运算执行。同时旷视在框架内部,使用了目前流行的计算图方式,但是和其他框架不同,MegEngine 使用的是异构架构,方便使用框架进行分布式计算。
此外,MegEngine 内部的计算以算子的形式进行,它支持多种算子节点和变量算子,包括常用的卷积、全连接、ReLU 和用户可定制的算子,甚至可以计算二阶梯度,从而进行更多底层和灵活的运算。
可以说,MegEngine 在尽全力提升深度学习计算性能的基础上,为用户提供了灵活易用的模型构建工具,极大地提升了开发效率。相比于很多深度学习开源框架,MegEngine 的特点也非常明显:
首先在运算速度上,旷视 MegEngine 具备高性能计算核心,动态静态结合的内存优化机制运算速度更快,且占用更少的内存资源;其次在易用性上,MegEngine 封装了平台细节,且接口兼容 PyTorch,新人用户可快速上手;最后,MegEngine 还支持多种硬件平台和异构计算,整个框架既可用于训练又同时支持推理,实现模型一次训练,多设备部署,能够免除了不必要的转换流程导致的性能下降和精度损失。
除以上性能,MegEngine 据称也为 IoT 和视觉任务进行了特别的优化,广泛支持各种芯片。通过领先的量化计算支持,其可以通过统一量化模型来支持多种设备,同时支持低于8bit 的网络推理。
深度学习框架对于人工智能发展的推动作用自是不言而喻,但框架安装、部署、上手使用一直是难点,要针对不同硬件、模型、内存做调试。而 MegEngine 做了相应的自动化和封装,使得门槛大大降低,初级开发者也能掌握。正如深度学习框架降低了 AI 的门槛,MegEngine 又进一步降低了框架本身的部署、使用门槛。
COCO 三连冠验证的实践能力
旷视是赶上深度学习兴起的第一批科技新创企业,三位创始人印奇、唐文斌、杨沐均出自清华姚班,代表着国内第一批最优秀的人工智能从业者。尤其近几年,旷视技术团队更在国际比赛中成绩不俗。
旷视团队获得 COCO 2019 三项冠军
2017 年 ,旷视获得 MC COCO 挑战赛物体检测、人体关键点检测第一名和物体分割的第二名,参赛团队则是谷歌、Facebook、微软、卡耐基·梅隆大学等实力竞队;2018 年,旷视团队又包揽了 3 项 MC COCO 比赛冠军和一项 Mapillary 比赛冠军;2019 年,旷视再次在物体检测、人体关键点和全景分割三项比赛中获得冠军。COCO 三连冠的成绩在国内史无前例。
2019 年 4 月,旷视又推出了物体检测数据集 Objects365,第一批开放 63 万张图像,拥有高达 1000 万的标注框,量级分别是目前全球最权威的物体检测数据集 MS COCO 的 5 倍和 11 倍。
TensorFlow、PyTorch 在开发者中的口碑、影响力或许一时一刻很难被替代,但若旷视在深度学习框架的开源上能为后来者打个样,对国内人工智能产业界不失为一件值得兴奋的事。
登录查看更多
点赞并收藏
0
暂时没有读者
0
权益说明
本文档仅做收录索引使用,若发现您的权益受到侵害,请立即联系客服(微信: zhuanzhi02,邮箱:bd@zhuanzhi.ai),我们会尽快为您处理
相关内容
Brain++
关注
1
Brain++是旷视自主研发的新一代AI生产力平台,包括深度学习框架MegEngine(旷视天元)、深度学习云计算平台MegCompute以及数据管理平台MegData,将算法、算力和数据能力融为一体。依托于Brain++,旷视可针对不同垂直领域的碎片化需求定制丰富且不断增长的算法组合,向客户提供包括算法、平台及应用软件、硬件设备和技术服务在内的全栈式人工智能解决方案。
【实用书】给开发者的深度学习商业应用指南,348页pdf
专知会员服务
54+阅读 · 2020年7月4日
【干货书】现代数据平台架构,636页pdf
专知会员服务
253+阅读 · 2020年6月15日
【哈佛《CS50 Python人工智能入门》课程 (2020)】
专知会员服务
111+阅读 · 2020年4月12日
谷歌推出量子机器学习框架TFQ-TensorFlow Quantum,一个可训练量子模型的机器学习框架
专知会员服务
33+阅读 · 2020年3月10日
抢鲜看!13篇CVPR2020论文链接/开源代码/解读
专知会员服务
49+阅读 · 2020年2月26日
【德勤】中国人工智能产业白皮书,68页pdf
专知会员服务
303+阅读 · 2019年12月23日
【百度研究院】2020年10大人工智能科技趋势,Baidu Research: 10 Technological Trends in 2020
专知会员服务
32+阅读 · 2019年12月23日
国家工信安全中心发布《人工智能中国专利技术分析报告》,74页pdf,百度AI专利榜首
专知会员服务
119+阅读 · 2019年12月10日
【O'Reilly TensorFlow Conference 2019】TensorFlow.js:用java实现机器学习(TensorFlow.js: Bringing machine learning to JavaScript),Google | Sandeep Gupta,蒙特利尔大学 | Joseph Paul Cohen
专知会员服务
6+阅读 · 2019年11月14日
《京东区块链技术实践白皮书》(2019版),95页PDF,京东数字科技编
专知会员服务
48+阅读 · 2019年11月9日
GitHub榜首:最强目标检测平台Detectron2 ,基于PyTorch完全重构
新智元
9+阅读 · 2019年10月15日
旷视联合智源发布全球最大物体检测数据集Objects365,举办CVPR DIW2019挑战赛
机器之心
3+阅读 · 2019年4月20日
如何快速入门TensorFlow ?丨极客时间
InfoQ
4+阅读 · 2019年1月8日
刚刚,阿里开源首个深度学习框架 X-Deep Learning!
阿里技术
4+阅读 · 2018年12月21日
Java 工程师快速入门深度学习,可以从 Deeplearning4j 开始
人工智能头条
13+阅读 · 2018年12月14日
深度学习开发必备开源框架
九章算法
12+阅读 · 2018年5月30日
2017年四巨头的深度学习框架之战,你支持谁?
全球人工智能
6+阅读 · 2017年12月29日
35个最著名的机器学习、深度学习AI项目 ‖ 开源
机械鸡
5+阅读 · 2017年9月23日
2017人工智能创新公司50强出炉 旷视(Face++)上榜
Megvii旷视科技
3+阅读 · 2017年7月10日
百度All in AI:陆奇公布阿波罗计划,李彦宏乘无人车参会
商业价值
3+阅读 · 2017年7月5日
NEAR: Neighborhood Edge AggregatoR for Graph Classification
Arxiv
5+阅读 · 2019年9月6日
Revisiting CycleGAN for semi-supervised segmentation
Arxiv
3+阅读 · 2019年8月30日
LadderNet: Multi-path networks based on U-Net for medical image segmentation
Arxiv
7+阅读 · 2019年8月28日
Knowledge Flow: Improve Upon Your Teachers
Arxiv
5+阅读 · 2019年4月11日
Precise Detection in Densely Packed Scenes
Arxiv
3+阅读 · 2019年4月8日
AuxNet: Auxiliary tasks enhanced Semantic Segmentation for Automated Driving
Arxiv
4+阅读 · 2019年1月17日
Facial Aging and Rejuvenation by Conditional Multi-Adversarial Autoencoder with Ordinal Regression
Arxiv
5+阅读 · 2018年4月8日
Complex-YOLO: Real-time 3D Object Detection on Point Clouds
Arxiv
3+阅读 · 2018年3月16日
Saliency-Enhanced Robust Visual Tracking
Arxiv
6+阅读 · 2018年2月8日
Integrating both Visual and Audio Cues for Enhanced Video Caption
Arxiv
4+阅读 · 2017年12月9日
VIP会员
自助开通(推荐)
客服开通
详情
相关主题
Brain++
深度学习框架
开源生态
深度学习
算力
计算机视觉
相关VIP内容
【实用书】给开发者的深度学习商业应用指南,348页pdf
专知会员服务
54+阅读 · 2020年7月4日
【干货书】现代数据平台架构,636页pdf
专知会员服务
253+阅读 · 2020年6月15日
【哈佛《CS50 Python人工智能入门》课程 (2020)】
专知会员服务
111+阅读 · 2020年4月12日
谷歌推出量子机器学习框架TFQ-TensorFlow Quantum,一个可训练量子模型的机器学习框架
专知会员服务
33+阅读 · 2020年3月10日
抢鲜看!13篇CVPR2020论文链接/开源代码/解读
专知会员服务
49+阅读 · 2020年2月26日
【德勤】中国人工智能产业白皮书,68页pdf
专知会员服务
303+阅读 · 2019年12月23日
【百度研究院】2020年10大人工智能科技趋势,Baidu Research: 10 Technological Trends in 2020
专知会员服务
32+阅读 · 2019年12月23日
国家工信安全中心发布《人工智能中国专利技术分析报告》,74页pdf,百度AI专利榜首
专知会员服务
119+阅读 · 2019年12月10日
【O'Reilly TensorFlow Conference 2019】TensorFlow.js:用java实现机器学习(TensorFlow.js: Bringing machine learning to JavaScript),Google | Sandeep Gupta,蒙特利尔大学 | Joseph Paul Cohen
专知会员服务
6+阅读 · 2019年11月14日
《京东区块链技术实践白皮书》(2019版),95页PDF,京东数字科技编
专知会员服务
48+阅读 · 2019年11月9日
热门VIP内容
开通专知VIP会员 享更多权益服务
【AAAI2025】多层次最优传输用于语言模型中的通用跨标记器知识蒸馏
大规模语言模型增强推荐系统:分类、趋势、应用与未来
面向战场移动威胁的预测模型:利用预测性数据模型打击大规模移动目标
OpenAI十二天总结与Agent新范式
相关资讯
GitHub榜首:最强目标检测平台Detectron2 ,基于PyTorch完全重构
新智元
9+阅读 · 2019年10月15日
旷视联合智源发布全球最大物体检测数据集Objects365,举办CVPR DIW2019挑战赛
机器之心
3+阅读 · 2019年4月20日
如何快速入门TensorFlow ?丨极客时间
InfoQ
4+阅读 · 2019年1月8日
刚刚,阿里开源首个深度学习框架 X-Deep Learning!
阿里技术
4+阅读 · 2018年12月21日
Java 工程师快速入门深度学习,可以从 Deeplearning4j 开始
人工智能头条
13+阅读 · 2018年12月14日
深度学习开发必备开源框架
九章算法
12+阅读 · 2018年5月30日
2017年四巨头的深度学习框架之战,你支持谁?
全球人工智能
6+阅读 · 2017年12月29日
35个最著名的机器学习、深度学习AI项目 ‖ 开源
机械鸡
5+阅读 · 2017年9月23日
2017人工智能创新公司50强出炉 旷视(Face++)上榜
Megvii旷视科技
3+阅读 · 2017年7月10日
百度All in AI:陆奇公布阿波罗计划,李彦宏乘无人车参会
商业价值
3+阅读 · 2017年7月5日
相关论文
NEAR: Neighborhood Edge AggregatoR for Graph Classification
Arxiv
5+阅读 · 2019年9月6日
Revisiting CycleGAN for semi-supervised segmentation
Arxiv
3+阅读 · 2019年8月30日
LadderNet: Multi-path networks based on U-Net for medical image segmentation
Arxiv
7+阅读 · 2019年8月28日
Knowledge Flow: Improve Upon Your Teachers
Arxiv
5+阅读 · 2019年4月11日
Precise Detection in Densely Packed Scenes
Arxiv
3+阅读 · 2019年4月8日
AuxNet: Auxiliary tasks enhanced Semantic Segmentation for Automated Driving
Arxiv
4+阅读 · 2019年1月17日
Facial Aging and Rejuvenation by Conditional Multi-Adversarial Autoencoder with Ordinal Regression
Arxiv
5+阅读 · 2018年4月8日
Complex-YOLO: Real-time 3D Object Detection on Point Clouds
Arxiv
3+阅读 · 2018年3月16日
Saliency-Enhanced Robust Visual Tracking
Arxiv
6+阅读 · 2018年2月8日
Integrating both Visual and Audio Cues for Enhanced Video Caption
Arxiv
4+阅读 · 2017年12月9日
大家都在搜
自主可控
palantir
大规模语言模型
CMU博士论文
态势感知
洛克菲勒
SMT
中印
图解微积分
社区分享 | 用 PoseNet + TensorFlow.js 在浏览器实现体感游戏
Top
提示
微信扫码
咨询专知VIP会员与技术项目合作
(加微信请备注: "专知")
微信扫码咨询专知VIP会员
Top