伯克利深度无监督学习更新 | 第二讲(上):无损压缩

2019 年 6 月 30 日 AI科技评论

AI 研习社获得官方授权,伯克利 CS 294-158 《深度无监督学习》中英字幕版,今天更新至第二讲的第一部分(课程总时长:1 h 46 min)

我们先来一睹为快——

第二讲 Part A 

无损压缩

上手视频约 5 分钟

翻译 | 张美旋  易锐韬  马丽娅     后期 | 酱番梨

  丰富的课程内容

本课程将涵盖深度学习中不需要标注数据的两个领域:深度生成模型自监督学习。生成模型的最新进展使得对自然图像、音频波形和文本语料库等高维原始数据进行真实建模成为可能。自监督学习的进步已经开始缩小监督表示学习和非监督表示学习之间的差距,本课程将涵盖这些主题的理论基础以及它们的新应用。

论文涉及GAN、VAE、降噪、自回归、强化学习、自监督学习等等,课程历时15周完成。

课程官网:https://sites.google.com/view/berkeley-cs294-158-sp19/home


  专业的讲师阵容

Pieter Abbeel,加州大学伯克利分校教授、机器人学习实验室主任,伯克利人工智能研究(BAIR)实验室联合主任。

Pieter Abbeel是机器人和强化学习领域的大牛。Pieter Abbeel 2008年从斯坦福大学获得博士学位,师从百度前首席科学家 Andrew Ng(吴恩达),毕业后在UC Berkeley任教。

2016~2017年,Pieter Abbeel加入Open AI,任研究科学家。现在则是Open AI顾问。

Pieter Abbeel还是两家AI公司的创始人,Gradescope和covariant.ai。

Pieter Abbeel 的研究重点集中于如何让机器人向人类学习(学徒学习),如何让机器人通过自己的试错过程学习(强化学习),以及如何通过从learning-to-learn(元学习)过程中加快技能获取。他开发的机器人已经学会了先进的直升机特技飞行、打结、基本装配、叠衣服、移动、以及基于视觉的机器人操作。

其他三位助教Peter Chen、Rocky Duan和Tianhao Zhang三人目前都是伯克利的博士生。


  先修要求:       

有丰富的概率、优化、深度学习经验。


  课程截图

是不是很心动?加入AI 研习CS294-158深度无监督学习小组即可观看完整视频,随时随地观看名校课程,邂逅众多学霸!共享笔记!


  课程大纲:

Week 1

第1a讲: 课程安排

第1b讲: 课程动机

第1c讲: 基于似然的模型 Part I: 自回归模型

Week 2

第2a讲: 基于似然的模型 Part I: 自回归模型 (ctd)

第2b讲: 无损压缩(Lossless Compression)

第2c讲: 基于似然的模型 Part II: 流模型

Week 3

第3a讲:基于似然的模型 Part II:流模型(ctd)

第3b讲:隐变量模型

Week 4

第4a讲:隐变量模型(ctd)(与第3周ppt相同)

第4b讲:比特编码/位反编码

Week 5

第5讲:隐式模型/生成对抗网络

Week 6

第六讲:非生成性表征学习

Week 7

第7a讲:非生成表征学习(ctd)

第7b讲:半监督学习

Week 8

第8讲:表征学习+其他问题

Week 9

第9a讲:无监督分布对齐

第9b讲:客座讲座:Ilya Sutskever

Week 10

第10a讲:无监督分配对齐(ctd)

第10b讲:客座讲座:Durk Kingma

Week 11

第11讲:语言模型(Alec Radford)

Week 12

第12a讲:无监督的表征学习

第12b讲:客座讲座Alyosha Efros

Week 13

第13a讲:待定(TBD)

第13b讲:客座讲座Aaron van den Oord

Week 14

无课

Week 15

期末项目报告

是不是很心动?加入AI 研习CS294-158深度无监督学习小组即可观看完整视频,随时随地观看名校课程,邂逅众多学霸!共享笔记!


  AI研习社小组介绍

「小组」功能上线后,AI 研习社推出了一系列的激励计划,鼓励各位组员学习视频课程,表现积极的学员还将获得由 AI 研习社提供的实物福利,甚至参加国内外峰会的学习机会哦!赶快将“AI研习小组”小程序添加到“我的小程序”吧!


  相关课程

除了这门课程外,AI 研习社还为热爱 AI 的你提供了以下国外院校AI必看经典课程:

2019 全球人工智能与机器人峰会

2019 年 7 月 12 日至 14 日,由中国计算机学会(CCF)主办、雷锋网和香港中文大学(深圳)联合承办,深圳市人工智能与机器人研究院协办的 2019 全球人工智能与机器人峰会(简称 CCF-GAIR 2019)将于深圳正式启幕。

届时,诺贝尔奖得主JamesJ. Heckman、中外院士、世界顶会主席、知名Fellow,多位重磅嘉宾将亲自坐阵,一起探讨人工智能和机器人领域学、产、投等复杂的生存态势。

 点击阅读原文,加入学习小组

登录查看更多
0

相关内容

MIT新书《强化学习与最优控制》
专知会员服务
279+阅读 · 2019年10月9日
麻省理工2019年深度学习导论课程全套PPT
专知
14+阅读 · 2019年2月15日
Learning in the Frequency Domain
Arxiv
11+阅读 · 2020年3月12日
Arxiv
6+阅读 · 2019年7月11日
Arxiv
15+阅读 · 2018年6月23日
VIP会员
Top
微信扫码咨询专知VIP会员