常识知识图谱的零样本学习,布朗大学

2020 年 6 月 19 日 专知

零样本学习依赖语义类表示,如属性或预训练的嵌入来预测类,而不需要任何标记示例。我们提出从常识知识图谱学习类表示。常识知识图谱是显性高级知识,它只需要很少的人力投入就可以应用到一系列任务中。为了捕获图中的知识,我们引入了ZSL-KG,这是一个基于图神经网络的框架,带有非线性聚合器来生成类表示。尽管之前大多数关于图神经网络的工作都是使用线性函数来聚合邻近节点的信息,但我们发现,非线性聚合器(如LSTMs或transformer)可以显著改善零目标任务。在跨三个数据集的两个自然语言任务中,ZSL-KG显示出与最先进的方法相比平均提高9.2点的准确性。此外,在对象分类任务上,ZSL-KG与不需要手工设计类表示的最佳方法相比,精度点提高了2.2。最后,我们发现ZSL-KG在这四个数据集上的平均准确率比使用线性聚合器的最佳图神经网络高出3.8点。


https://arxiv.org/abs/2006.10713



专知便捷查看

便捷下载,请关注专知公众号(点击上方蓝色专知关注)

  • 后台回复“ZSLKG” 可以获取《常识知识图谱的零样本学习,布朗大学》专知下载链接索引

专知,专业可信的人工智能知识分发,让认知协作更快更好!欢迎注册登录专知www.zhuanzhi.ai,获取5000+AI主题干货知识资料!
欢迎微信扫一扫加入专知人工智能知识星球群,获取最新AI专业干货知识教程资料和与专家交流咨询
点击“阅读原文”,了解使用专知,查看获取5000+AI主题知识资源
登录查看更多
3

相关内容

【斯坦福CS520】向量空间中嵌入的知识图谱推理,48页ppt
专知会员服务
99+阅读 · 2020年6月11日
【CVPR2020-北京大学】自适应间隔损失的提升小样本学习
专知会员服务
81+阅读 · 2020年6月9日
【哈佛大学】机器学习的黑盒解释性,52页ppt
专知会员服务
166+阅读 · 2020年5月27日
【阿尔托大学】图神经网络,Graph Neural Networks,附60页ppt
专知会员服务
178+阅读 · 2020年4月26日
新加坡南洋理工最新37页《零样本学习综述》论文
专知会员服务
109+阅读 · 2019年10月20日
最新《动态网络嵌入》综述论文,25页pdf
专知
31+阅读 · 2020年6月17日
新任务&数据集:视觉常识推理(VCR)
专知
50+阅读 · 2018年12月1日
Area Attention
Arxiv
5+阅读 · 2019年5月23日
Arxiv
6+阅读 · 2019年4月8日
Arxiv
19+阅读 · 2018年3月28日
VIP会员
Top
微信扫码咨询专知VIP会员