没想到一年过的这么快,好像刚刚写完OKR,立完flag,就到了滑雪的季节。
今天我们不卷技术了,来给大家推荐一份由 stateof.ai 出品的2021 AI年度报告 ,其中包含了五点重要的总结:
Research:2021年的AI重要科研进展回顾
这份188页的PPT报告由知名风投公司Air Street Capital的合伙人Nathan Benaich和投资了100+初创公司的天使投资人Ian Hogarth联合撰写,该系列报告从2018年开始已经连续撰写了4年。除了两位主要作者外,还有众多研究者、机构以及reviewer把关,既有深度又有广度,涵盖了AI的方方面面。
即使今年一篇论文都没读,也千万不要错过这份报告,说不定就激发了自己的某个idea,就地起飞!
下面就带大家挑重点速读一下,如需下载可在Datawhale公众后台回复「21报告 」。
一、进展总结
Research
在2021年,Transformer结构除了NLP任务外,在语音、CV等领域都有落地,逐渐成为一种通用结构
大型语言模型在尺寸上不断扩张,并且每个国家都有自己的语言模型
AI-first方法席卷了生物领域,在蛋白质、RNA上有很高的仿真度
Talent
从1980年至今,中国高校的科技刊物发表量飞速上升
随着大型科技公司选择和顶尖高校合作,AI research的分化越来越严重
学术组织的计算资源不足,而88%的顶级AI学院都能获得大型科技公司的赞助
Industry
人工智能和数据公司的生态系统已经显着成熟,有大量 IPO,标志着它们开始进入AI应用部署的阶段
两家公司利用AI完成药物研发并上市,成功IP,预示着AI在医药方面的潜力
AI产品成功在各个高风险领域落地,例如英国国家电网、员工健康和安全、以及仓储
AI社区开始重新关注应用中的数据问题,比如 bias, drift, specification, labels 等
随着各国寻求供应链主权和对英伟达的 Arm 收购进行调查,半导体相关的公司大幅加速
Politics
AI已经被用于各国的军方:自动武器的研发,并会定期进行更多测试
AI安全现在是重中之重,但只有不到 50 名研究人员全职从事该领域的工作
New experiments on AI governance emerge: totally distributed + open source, private + open source, and public benefit corporation
二、预测
过去的一年里,AI不仅在基础的NLP、CV、语音任务上都有很大的提升,在医药、化学、游戏RL也有亮点的应用。对于接下来的2022年,作者们做了以下8点预测:
Transformer将替代循环神经网络,与RL联合学习世界知识,在更复杂的游戏环境中超越人类
荷兰ASML公司(最先进的光刻机制造商)的市值将达到500亿
Anthropic publishes on the level of GPT, Dota, AlphaGo to establish itself as a third pole of AGI research
AI半导体公司将迎来一波整合,Graphcore、Cerebras、SambaNova、Groq 或 Mythic 中的至少一个被大型科技公司或主要半导体公司收购
Transformer+CNN的混合模型将用少于十倍的参数达到ImageNet top-1的SOTA(目前是CoAtNet-7, 90.88%, 2.44B params)
在PapersWithCode创建的monthly repos上,JAX框架的将从1%增长到5%
从这份报告来看,虽然互联网红利见顶,但AI在其他领域仍处于初始发展阶段,还是有很多机会等待大家发掘的。祝大家早日发现自己的细分蓝海。
公众号后台回复“ 数据集 ”获取30+深度学习数据集下载~
备注: 姓名-学校/公司-研究方向-城市(如:小极-北大-目标检测-深圳)
即可申请加入极市 目标检测/图像分割/工业检测/人脸/医学影像/3D/SLAM/自动驾驶/超分辨率/姿态估计/ReID/GAN/图像增强/OCR/视频理解 等技术交流群
每月大咖直播分享、真实项目需求对接、求职内推、算法竞赛、干货资讯汇总、与 10000+ 来自港科大、北大、清华、中科院、CMU、腾讯、百度等名校名企视觉开发者互动交流~
觉得有用麻烦给个在看啦~