清华最新ICASSP2022讲习报告《能量模型及其在语音语言处理中的应用》133页ppt

2022 年 11 月 4 日 专知

基于能量的模型(EBMs)是一类重要的概率模型,也被称为随机场和无向图模型。ebm与其他流行的概率模型有本质的不同,后者是自规范化的(即和为1),如隐藏马尔可夫模型(HMMs)、自回归模型、生成对抗网(GANs)和变分自编码器(VAEs)。近年来,EBMs不仅吸引了核心机器学习领域的关注,还吸引了语音、视觉、自然语言处理(NLP)等应用领域的关注,在理论和算法上都取得了显著进展。据我们所知,目前还没有关于应用于语音和语言处理的EBMs的教程。语音和语言的顺序性质也提出了特殊的挑战,需要不同于处理固定维数据(如图像)的处理方法。

本教程的目的是系统介绍基于能量的模型,包括算法进展和语音和语言处理中的应用,共分为四章。首先,我们将介绍EBMs的基础知识,包括经典模型、最新的神经网络参数化模型,以及从经典方法到最先进的各种学习算法。接下来的三章将分别介绍如何在三种不同的场景中应用EBMs: 1)用于语言建模的EBMs, 2)用于语音识别和自然语言标记的EBMs,以及3)用于半监督自然语言标记的EBMs。此外,我们将介绍开源工具包,以帮助观众熟悉开发和应用基于能源的模型的技术



专知便捷查看

便捷下载,请关注专知公众号(点击上方蓝色专知关注)

  • 后台回复“R223” 就可以获取【牛津大学博士论文】深度多智能体强化学习中的协调与沟通,223页pdf》专知下载链接

                       
专知,专业可信的人工智能知识分发 ,让认知协作更快更好!欢迎注册登录专知www.zhuanzhi.ai,获取100000+AI(AI与军事、医药、公安等)主题干货知识资料!
欢迎微信扫一扫加入专知人工智能知识星球群,获取最新AI专业干货知识教程资料和与专家交流咨询
点击“ 阅读原文 ”,了解使用 专知 ,查看获取100000+AI主题知识资料

登录查看更多
1

相关内容

《自监督学习》最新报告,45页ppt
专知会员服务
74+阅读 · 2022年9月14日
【MIT博士论文】自监督学习语音处理,148页pdf
专知会员服务
51+阅读 · 2022年8月31日
【IEEE ICASSP 2022教程】非负矩阵分解的最新进展,266页ppt
专知会员服务
74+阅读 · 2022年5月28日
《机器学习的最优传输》教程,63页PPT
专知会员服务
61+阅读 · 2022年4月30日
【NeurIPS 2020】近似推断进展,272页ppt
专知会员服务
32+阅读 · 2020年12月11日
【CIKM2020】神经贝叶斯信息处理,220页ppt,国立交通大学
专知会员服务
34+阅读 · 2020年10月26日
最新《生成式对抗网络》简介,25页ppt
专知会员服务
173+阅读 · 2020年6月28日
WSDM 2020教程《深度贝叶斯数据挖掘》,附257页PPT下载
专知会员服务
156+阅读 · 2020年2月7日
《自监督学习》最新报告,45页ppt
专知
1+阅读 · 2022年9月14日
自然语言处理(NLP)前沿进展报告(PPT下载)
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
16+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
国家自然科学基金
1+阅读 · 2008年12月31日
国家自然科学基金
0+阅读 · 2008年12月31日
Arxiv
0+阅读 · 2022年12月29日
Arxiv
54+阅读 · 2022年1月1日
Arxiv
19+阅读 · 2021年4月8日
Arxiv
13+阅读 · 2019年1月26日
Arxiv
136+阅读 · 2018年10月8日
Arxiv
22+阅读 · 2018年8月30日
Arxiv
26+阅读 · 2018年8月19日
Arxiv
11+阅读 · 2018年1月15日
VIP会员
相关VIP内容
《自监督学习》最新报告,45页ppt
专知会员服务
74+阅读 · 2022年9月14日
【MIT博士论文】自监督学习语音处理,148页pdf
专知会员服务
51+阅读 · 2022年8月31日
【IEEE ICASSP 2022教程】非负矩阵分解的最新进展,266页ppt
专知会员服务
74+阅读 · 2022年5月28日
《机器学习的最优传输》教程,63页PPT
专知会员服务
61+阅读 · 2022年4月30日
【NeurIPS 2020】近似推断进展,272页ppt
专知会员服务
32+阅读 · 2020年12月11日
【CIKM2020】神经贝叶斯信息处理,220页ppt,国立交通大学
专知会员服务
34+阅读 · 2020年10月26日
最新《生成式对抗网络》简介,25页ppt
专知会员服务
173+阅读 · 2020年6月28日
WSDM 2020教程《深度贝叶斯数据挖掘》,附257页PPT下载
专知会员服务
156+阅读 · 2020年2月7日
相关基金
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
16+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
国家自然科学基金
1+阅读 · 2008年12月31日
国家自然科学基金
0+阅读 · 2008年12月31日
相关论文
Arxiv
0+阅读 · 2022年12月29日
Arxiv
54+阅读 · 2022年1月1日
Arxiv
19+阅读 · 2021年4月8日
Arxiv
13+阅读 · 2019年1月26日
Arxiv
136+阅读 · 2018年10月8日
Arxiv
22+阅读 · 2018年8月30日
Arxiv
26+阅读 · 2018年8月19日
Arxiv
11+阅读 · 2018年1月15日
Top
微信扫码咨询专知VIP会员