115页PPT带你领略深度生成模型全貌(附下载链接)

2018 年 7 月 27 日 机器学习算法与Python学习

本文为大家带来了斯坦福大学PH.D Aditya Grover同学的深度生成模型tutorial,希望对大家的学习有所帮助。


作者 | Aditya Grover, Stefano Ermon

编译 | Yongxi

整理 | 专知


点击阅读原文即可下载


添加微信:MLAPython

(姓名-单位-方向)

即可加入机器学习交流群



摘要


生成模型是图模型与概率编程语言中概率推理的核心范例,最近由于神经网络在参数化方面的改进、以及基于梯度随机优化方面的进展,使得可以对高维数据进行跨模态建模。


本教程的前半部分,将全面介绍深度生成模型,包括生成对抗网络、变分自编码器以及自回归模型。对于每一个模型,我们都将深入探讨各自的概率公式、学习算法、以及与其他模型的关系。后半部分将演示一组具有代表性的推理任务,展示深度生成网络在其中的应用。最后,我们将讨论堂前领域面临的挑战,并展望未来的研究方向。


目录


第一部分:

  • 生成模型的动机,以及与判别模型的对比

  • 生成模型的定义、特征、估计密度、模拟数据、学习表示

  • 传统生成模型方法,以及深度网络在参数化方面的作用

  • 基于学习算法的生成模型分类,基于相似点的学习和无相似点的学习

  • Likelihood-based学习实例

  • 自回归模型

  • 变分自编码器


第二部分:

  • Likelihood-based学习实例(续)

  • 规范化流模型

  • Likelihood-free 学习实例

  • 生成对抗网络

  • 深度生成模型的实例

  • 半监督学习

  • 模仿学习

  • 对抗样本

  • 压缩感知

  • 关于生成模型未来研究的主要挑战和展望。


附部分PPT:



登录查看更多
0

相关内容

深度生成模型基本都是以某种方式寻找并表达(多变量)数据的概率分布。有基于无向图模型(马尔可夫模型)的联合概率分布模型,另外就是基于有向图模型(贝叶斯模型)的条件概率分布。前者的模型是构建隐含层(latent)和显示层(visible)的联合概率,然后去采样。基于有向图的则是寻找latent和visible之间的条件概率分布,也就是给定一个随机采样的隐含层,模型可以生成数据。 生成模型的训练是一个非监督过程,输入只需要无标签的数据。除了可以生成数据,还可以用于半监督的学习。
最新《生成式对抗网络》简介,25页ppt
专知会员服务
173+阅读 · 2020年6月28日
深度学习自然语言处理概述,216页ppt,Jindřich Helcl
专知会员服务
212+阅读 · 2020年4月26日
WSDM 2020教程《深度贝叶斯数据挖掘》,附257页PPT下载
专知会员服务
156+阅读 · 2020年2月7日
【EMNLP2019教程】端到端学习对话人工智能,附237页PPT下载
专知会员服务
69+阅读 · 2019年11月25日
自然语言处理(NLP)前沿进展报告(PPT下载)
115页Slides带你领略深度生成模型全貌(附PPT)
数据派THU
12+阅读 · 2018年7月31日
Adversarial Transfer Learning
Arxiv
12+阅读 · 2018年12月6日
Arxiv
22+阅读 · 2018年8月30日
Arxiv
8+阅读 · 2018年3月17日
VIP会员
Top
微信扫码咨询专知VIP会员