随着不同形式的世界模型的出现,“知识感知”学习正在成为语言学习的一个重要研究领域。•OOD泛化、ML安全性和数据效率是全面评估我们在ML管道中利用这些预先训练模型的效果的关键轴。•当使用不同的“先验”时,我们需要新的理论工具来精确地描述这些轴之间的权衡。•知识是“不完整的”——用我们的经验适当地增强世界模型对实现闭环系统至关重要。•不确定性估计和模型可靠性描述是模型设计和优化的一个组成部分。

成为VIP会员查看完整内容
29

相关内容

「元学习」最新DSAA2021-Tutorial,附视频与83页ppt
专知会员服务
29+阅读 · 2021年10月20日
《多任务学习》最新综述论文,20页pdf
专知会员服务
121+阅读 · 2021年4月6日
【GPT-3作者亲解】超大型语言模型少样本学习,109页ppt
专知会员服务
106+阅读 · 2020年12月19日
(ICML 2020 Tutorial)贝叶斯深度学习与概率模型构建,134页ppt
少标签数据学习,54页ppt
专知会员服务
194+阅读 · 2020年5月22日
「PPT」深度学习中的不确定性估计
专知
25+阅读 · 2019年7月20日
吴恩达团队:神经网络如何正确初始化?
AI100
10+阅读 · 2019年5月15日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
国家自然科学基金
1+阅读 · 2008年12月31日
VIP会员
相关基金
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
国家自然科学基金
1+阅读 · 2008年12月31日
微信扫码咨询专知VIP会员