会员服务
语言模型 · 信息论 ·
2020 年 11 月 9 日
最新《生成式语言模型: 信息论视角》报告，292页ppt
专知会员服务
专知会员服务
专知，提供专业可信的知识分发服务，让认知协作更快更好！

本讲座的大部分内容将致力于两篇论文，它们试图做到这一点:通过使用概率和基于信息理论的度量，公平地比较生成模型的表现。第一篇论文详细介绍了如何通过总比特来评价(单语)开放词汇语言模型，第二篇论文思考了“信息”的意义以及如何使用它来比较机器翻译模型。

成为VIP会员查看完整内容
https://nlpwithfriends.com/speakers/sabrina-mielke
Fair comparisons for generative language models—with a bit of Information Theory 【视频】Fair comparisons for generative language models—with a bit of Information Theory
28

相关内容

【普林斯顿】最新《监督学习数学视角理解》报告，64页ppt
【普林斯顿】最新《监督学习数学视角理解》报告，64页ppt
专知会员服务
44+阅读 · 2020年11月30日
最新《深度卷积神经网络理论》报告，35页ppt
最新《深度卷积神经网络理论》报告，35页ppt
专知会员服务
45+阅读 · 2020年11月30日
少即是多？非参数语言模型，68页ppt
少即是多？非参数语言模型，68页ppt
专知会员服务
23+阅读 · 2020年11月22日
【EMNLP2020】序列知识蒸馏进展，44页ppt
【EMNLP2020】序列知识蒸馏进展，44页ppt
专知会员服务
38+阅读 · 2020年11月21日
【EMNLP2020】自然语言处理模型可解释性预测，182页ppt
【EMNLP2020】自然语言处理模型可解释性预测，182页ppt
专知会员服务
50+阅读 · 2020年11月19日
【PKDD2020教程】机器学习不确定性，附88页ppt与视频
【PKDD2020教程】机器学习不确定性，附88页ppt与视频
专知会员服务
94+阅读 · 2020年10月18日
最新《深度生成式模型进展》视频报告，43页ppt，斯坦福Aditya Grover
最新《深度生成式模型进展》视频报告，43页ppt，斯坦福Aditya Grover
专知会员服务
45+阅读 · 2020年8月9日
【DeepMind硬核课】深度学习自然语言处理前沿进展，附103页ppt
【DeepMind硬核课】深度学习自然语言处理前沿进展，附103页ppt
专知会员服务
133+阅读 · 2020年6月28日
最新《生成式对抗网络》技术综述课程，70页ppt带你学习GAN进展
最新《生成式对抗网络》技术综述课程，70页ppt带你学习GAN进展
专知会员服务
212+阅读 · 2020年6月20日
少标签数据学习，54页ppt
少标签数据学习，54页ppt
专知会员服务
198+阅读 · 2020年5月22日
最新《深度生成式模型进展》视频报告，43页ppt，斯坦福Aditya Grover
最新《深度生成式模型进展》视频报告，43页ppt，斯坦福Aditya Grover
专知
13+阅读 · 2020年8月9日
【EMNLP2019教程】分布式词向量表示，附239页PPT下载
【EMNLP2019教程】分布式词向量表示，附239页PPT下载
专知
20+阅读 · 2019年11月13日
图神经网络GNN最新理论进展和应用探索，附报告下载
图神经网络GNN最新理论进展和应用探索，附报告下载
专知
70+阅读 · 2019年8月25日
【EMNLP2019】最新5篇论文推荐，BERT，对话系统，知识图谱，注意力机制等
【EMNLP2019】最新5篇论文推荐，BERT，对话系统，知识图谱，注意力机制等
专知
32+阅读 · 2019年8月17日
ACL 2019 | 基于知识增强的语言表示模型，多项NLP任务表现超越BERT
ACL 2019 | 基于知识增强的语言表示模型，多项NLP任务表现超越BERT
PaperWeekly
8+阅读 · 2019年6月3日
【EMNLP2018】152页基于深度学习的聊天机器人全面总结（附PPT下载）
【EMNLP2018】152页基于深度学习的聊天机器人全面总结（附PPT下载）
专知
10+阅读 · 2018年11月6日
自然语言处理中的语言模型预训练方法
自然语言处理中的语言模型预训练方法
PaperWeekly
14+阅读 · 2018年10月21日
自然语言处理(NLP)前沿进展报告（PPT下载）
自然语言处理(NLP)前沿进展报告（PPT下载）
专知
23+阅读 · 2018年9月29日
干货 | 如何从编码器和解码器两方面改进生成式句子摘要？
干货 | 如何从编码器和解码器两方面改进生成式句子摘要？
微软研究院AI头条
8+阅读 · 2018年3月28日
【干货】DeepMind 研究科学家深度生成模型报告，视频+PPT一文全揽最新前沿进展（附下载）
【干货】DeepMind 研究科学家深度生成模型报告，视频+PPT一文全揽最新前沿进展（附下载）
专知
8+阅读 · 2017年12月27日
Explainable Recommendation Systems by Generalized Additive Models with Manifest and Latent Interactions
Arxiv
2+阅读 · 2020年12月15日
Improved Consistency Regularization for GANs
Arxiv
1+阅读 · 2020年12月14日
Train Large, Then Compress: Rethinking Model Size for Efficient Training and Inference of Transformers
Arxiv
12+阅读 · 2020年6月23日
Improving Knowledge-aware Dialogue Generation via Knowledge Base Question Answering
Arxiv
16+阅读 · 2019年12月16日
GREASE: A Generative Model for Relevance Search over Knowledge Graphs
Arxiv
4+阅读 · 2019年10月11日
A Comparative Study on Transformer vs RNN in Speech Applications
A Comparative Study on Transformer vs RNN in Speech Applications
Arxiv
4+阅读 · 2019年9月13日
Commonsense Knowledge + BERT for Level 2 Reading Comprehension Ability Test
Arxiv
4+阅读 · 2019年9月8日
Latent Relation Language Models
Arxiv
21+阅读 · 2019年8月21日
Sparse and Constrained Attention for Neural Machine Translation
Arxiv
4+阅读 · 2018年5月21日
Generating Wikipedia by Summarizing Long Sequences
Arxiv
7+阅读 · 2018年1月30日
VIP会员
相关主题
语言模型
信息论
相关VIP内容
【普林斯顿】最新《监督学习数学视角理解》报告，64页ppt
【普林斯顿】最新《监督学习数学视角理解》报告，64页ppt
专知会员服务
44+阅读 · 2020年11月30日
最新《深度卷积神经网络理论》报告，35页ppt
最新《深度卷积神经网络理论》报告，35页ppt
专知会员服务
45+阅读 · 2020年11月30日
少即是多？非参数语言模型，68页ppt
少即是多？非参数语言模型，68页ppt
专知会员服务
23+阅读 · 2020年11月22日
【EMNLP2020】序列知识蒸馏进展，44页ppt
【EMNLP2020】序列知识蒸馏进展，44页ppt
专知会员服务
38+阅读 · 2020年11月21日
【EMNLP2020】自然语言处理模型可解释性预测，182页ppt
【EMNLP2020】自然语言处理模型可解释性预测，182页ppt
专知会员服务
50+阅读 · 2020年11月19日
【PKDD2020教程】机器学习不确定性，附88页ppt与视频
【PKDD2020教程】机器学习不确定性，附88页ppt与视频
专知会员服务
94+阅读 · 2020年10月18日
最新《深度生成式模型进展》视频报告，43页ppt，斯坦福Aditya Grover
最新《深度生成式模型进展》视频报告，43页ppt，斯坦福Aditya Grover
专知会员服务
45+阅读 · 2020年8月9日
【DeepMind硬核课】深度学习自然语言处理前沿进展，附103页ppt
【DeepMind硬核课】深度学习自然语言处理前沿进展，附103页ppt
专知会员服务
133+阅读 · 2020年6月28日
最新《生成式对抗网络》技术综述课程，70页ppt带你学习GAN进展
最新《生成式对抗网络》技术综述课程，70页ppt带你学习GAN进展
专知会员服务
212+阅读 · 2020年6月20日
少标签数据学习，54页ppt
少标签数据学习，54页ppt
专知会员服务
198+阅读 · 2020年5月22日
热门VIP内容
相关资讯
最新《深度生成式模型进展》视频报告，43页ppt，斯坦福Aditya Grover
最新《深度生成式模型进展》视频报告，43页ppt，斯坦福Aditya Grover
专知
13+阅读 · 2020年8月9日
【EMNLP2019教程】分布式词向量表示，附239页PPT下载
【EMNLP2019教程】分布式词向量表示，附239页PPT下载
专知
20+阅读 · 2019年11月13日
图神经网络GNN最新理论进展和应用探索，附报告下载
图神经网络GNN最新理论进展和应用探索，附报告下载
专知
70+阅读 · 2019年8月25日
【EMNLP2019】最新5篇论文推荐，BERT，对话系统，知识图谱，注意力机制等
【EMNLP2019】最新5篇论文推荐，BERT，对话系统，知识图谱，注意力机制等
专知
32+阅读 · 2019年8月17日
ACL 2019 | 基于知识增强的语言表示模型，多项NLP任务表现超越BERT
ACL 2019 | 基于知识增强的语言表示模型，多项NLP任务表现超越BERT
PaperWeekly
8+阅读 · 2019年6月3日
【EMNLP2018】152页基于深度学习的聊天机器人全面总结（附PPT下载）
【EMNLP2018】152页基于深度学习的聊天机器人全面总结（附PPT下载）
专知
10+阅读 · 2018年11月6日
自然语言处理中的语言模型预训练方法
自然语言处理中的语言模型预训练方法
PaperWeekly
14+阅读 · 2018年10月21日
自然语言处理(NLP)前沿进展报告（PPT下载）
自然语言处理(NLP)前沿进展报告（PPT下载）
专知
23+阅读 · 2018年9月29日
干货 | 如何从编码器和解码器两方面改进生成式句子摘要？
干货 | 如何从编码器和解码器两方面改进生成式句子摘要？
微软研究院AI头条
8+阅读 · 2018年3月28日
【干货】DeepMind 研究科学家深度生成模型报告，视频+PPT一文全揽最新前沿进展（附下载）
【干货】DeepMind 研究科学家深度生成模型报告，视频+PPT一文全揽最新前沿进展（附下载）
专知
8+阅读 · 2017年12月27日
相关论文
Explainable Recommendation Systems by Generalized Additive Models with Manifest and Latent Interactions
Arxiv
2+阅读 · 2020年12月15日
Improved Consistency Regularization for GANs
Arxiv
1+阅读 · 2020年12月14日
Train Large, Then Compress: Rethinking Model Size for Efficient Training and Inference of Transformers
Arxiv
12+阅读 · 2020年6月23日
Improving Knowledge-aware Dialogue Generation via Knowledge Base Question Answering
Arxiv
16+阅读 · 2019年12月16日
GREASE: A Generative Model for Relevance Search over Knowledge Graphs
Arxiv
4+阅读 · 2019年10月11日
A Comparative Study on Transformer vs RNN in Speech Applications
A Comparative Study on Transformer vs RNN in Speech Applications
Arxiv
4+阅读 · 2019年9月13日
Commonsense Knowledge + BERT for Level 2 Reading Comprehension Ability Test
Arxiv
4+阅读 · 2019年9月8日
Latent Relation Language Models
Arxiv
21+阅读 · 2019年8月21日
Sparse and Constrained Attention for Neural Machine Translation
Arxiv
4+阅读 · 2018年5月21日
Generating Wikipedia by Summarizing Long Sequences
Arxiv
7+阅读 · 2018年1月30日
微信扫码咨询专知VIP会员
Top