不氪金玩转中文超大规模预训练,这里有一份详细攻略

2020 年 12 月 18 日 机器之心
随着企业智能化转型的深入,智能文本处理需求广泛存在,而传统的NLP定制方法在实际的产业应用中面临着不少问题,包括需要较多高质量的人工标注数据、缺少NLP技术选型与模型调优经验、迭代调优耗时长等,再加上往往需要高昂的算力花费,让不少企业望而生畏。

今年8月,百度重磅发布语义理解技术与平台文心(ERNIE),为企业提供了一种革新性的应用范式,集先进的预训练模型、全面的NLP算法集、端到端开发套件和平台化服务于一体,提供一站式NLP开发与服务,让企业用户更简单、高效地定制企业级文本模型。

下周二(12月22日),「三小时AI开发进阶」公开课第二讲,百度资深研发工程师将会 带来NLP语义理解与预训练技术讲解、文心原理解析与最新技术解读、技术应用实例分享 ,一小时课程干货满满,等你加入!


12月22日20:00,第二课准时开讲

NLP开发利器解析:中文超大规模预训练模型精讲



课程讲师:硕环老师,百度自然语言处理部资深研发工程师

直播时间: 12月22日20:00—21:00
直播内容:
  • 语义理解技术简介
  • 基于预训练的语义理解技术

  • 文心(ERNIE)技术原理详解

  • 文心最新技术解读 

  • 文心语义理解技术应用

课前技术点铺垫:
文心(ERNIE)介绍

文心(ERNIE)基于领先的语义理解核心技术,内置百度自研业界效果领先的预训练模型集ERNIE和全面领先的算法集,将文本数据处理、基于深度学习的模型训练、模型评估和上线部署等NLP开发流程进行易用性封装,为NLP开发者提供一整套效果领先、简单易用、高效灵活的NLP模型开发服务。

百度通过将世界领先的NLP技术成果开放给业界,降低了NLP技术的准入门槛,让各大产业都能快速拥有构建和应用文本智能的能力,为产业智能化提供了全新的加速度。在今年7月的世界人工智能大会(WAIC)上,文心(ERNIE)更是摘得了大会最高荣誉SAIL奖(Super AI Leader,卓越人工智能引领者),在人工智能领域技术创新和应用探索等方面获得权威肯定。
文心官网: wenxin.baidu.com

扫码添加机器之心小助手,备注「NLP」,加入交流群一起看直播。

参与课程拿礼品


直播课程后,我们将设置一次实践作业,在EasyDL上实践效果优化机制,提交模型ID、模型名称、模型效果等信息,作业完成优秀的5名同学,可获得100元京东卡1张。


同时,我们也将在课程全程设置多次抽奖,立即参与即有机会获得。



最后第三期课程预告


点击阅读原文,抢先预习文心平台使用。

登录查看更多
0

相关内容

在搭建网络模型时,需要随机初始化参数,然后开始训练网络,不断调整直到网络的损失越来越小。在训练的过程中,一开始初始化的参数会不断变化。当参数训练到比较好的时候就可以将训练模型的参数保存下来,以便训练好的模型可以在下次执行类似任务时获得较好的结果。
专知会员服务
66+阅读 · 2021年3月21日
小米在预训练模型的探索与优化
专知会员服务
20+阅读 · 2020年12月31日
专知会员服务
141+阅读 · 2020年12月20日
专知会员服务
29+阅读 · 2020年10月9日
TensorFlowLite:端侧机器学习框架
专知会员服务
33+阅读 · 2020年8月27日
【书籍】深度学习框架:PyTorch入门与实践(附代码)
专知会员服务
167+阅读 · 2019年10月28日
GLUE 榜单破 90 大关!百度预训练模型ERNIE荣登榜首
AI科技评论
3+阅读 · 2019年12月11日
【赠书】TensorFlow自然语言处理
AINLP
17+阅读 · 2019年7月14日
七夕福利 | 如何制作一个聊天机器人?
StuQ
5+阅读 · 2017年8月28日
限免公开课|如何制作一个聊天机器人?
Arxiv
0+阅读 · 2021年6月7日
Arxiv
1+阅读 · 2021年5月29日
UNITER: Learning UNiversal Image-TExt Representations
Arxiv
23+阅读 · 2019年9月25日
Arxiv
11+阅读 · 2019年6月19日
CoQA: A Conversational Question Answering Challenge
Arxiv
7+阅读 · 2018年8月21日
VIP会员
相关VIP内容
Top
微信扫码咨询专知VIP会员