目前流行的图表示学习(GRL)方法通常依赖于从“大”数据中学习,需要大量标注数据进行模型训练。然而,通常情况下,图形与“小”标记数据相关联,因为数据注释和标记总是一项耗时和资源消耗的任务。这个事实掩盖了GRL在许多实际情况下的能力和适用性。因此,对图的数据有效学习已经成为许多现实应用的必要条件,近年来已经有许多关于这一主题的研究。在本教程中,我们将系统地回顾近年来关于图数据高效学习的研究,特别是图少样本学习和图自监督学习的一系列方法和应用。首先,我们将介绍图表示学习方法、传统的少样本学习和自监督学习技术的概况。然后,我们将从三个主要的不同粒度的图挖掘任务: 节点级学习任务、图级学习任务和边缘级学习任务来介绍图数据高效学习的工作。最后,我们将总结本教程,并提出未来研究中有待解决的问题和迫切需要解决的问题。本教程的作者是这个研究领域的活跃和多产的研究者。关键词: 图表示学习,数据高效学习,少样本学习,自监督学习。

https://kdd2021graph.github.io/

现实世界的系统通常被建模为图形,表示由边(关系)连接的节点(实体)以及节点和边中的内容。在进行特定目的的机器学习算法特征工程时,系统中的大规模数据收集既需要领域理解,又需要较大的探索搜索空间。因此,许多数据驱动图表示学习技术(data-driven graph representation learning techniques, GRL)[6,21]被提出用于自动生成各种应用领域的图的特征表示,包括信息服务、医疗保健、网络安全等。

在一个系统中开发强大的GRL通常需要大量的特定任务的监控信息(标记数据)进行模型训练。然而,丢失或缺少标签数据在实际系统中是很常见的,做数据注释通常代价很高。例如,治疗活性的分子特性检测需要大量的人力物力和实验资源。对于进入系统的新用户/实体,信息服务面临冷启动问题。近年来,研究者针对GRL中的小标记数据挑战提出了许多数据高效学习模型,主要基于少样本学习[19]和自监督学习[11]。因此,我们有动机组织本教程来回顾最近关于图表数据高效学习的工作,并讨论它们如何解决现实世界的问题。结合不同粒度级别的主要图数据挖掘任务,本教程将研究内容分为概览、节点级数据高效学习、图级数据高效学习和边缘级数据高效学习四个部分。

  • 概述。我们将介绍背景和概述。首先,我们将介绍主要的图表示学习方法[6,21],传统的少样本学习[19]和自监督学习技术[11]。然后,我们将介绍数据高效GRL研究的概况。

  • 节点级数据高效学习。我们将在节点级别上介绍数据高效学习的方法和应用。目标是用小的标记数据对图上的节点进行预测。我们将涵盖一般节点分类[2,7,8,10,16,18,23,24,28]和异常检测[3,12,15]。

  • 图级数据高效学习。我们将介绍数据高效学习的方法和应用。与节点级预测任务不同,目标是使用少量注释信息对整个图进行预测。我们将讨论一般的图分类[1,14]和分子预测[5,17]。

  • 边级数据高效学习。我们将在边级层面讨论数据高效学习的方法和应用。其目的是利用小的已知关系数据对关系结构进行建模,并预测节点之间的缺失关系。我们将包括链路预测[4,9,22,26]、多跳关系推理[13,27]和推荐[20,25]。

成为VIP会员查看完整内容
60

相关内容

图表示学习是2018年火爆全球的一个深度学习方向,从以 Line, meta-path 等为首的节点表示学习,到以 GCN,GraphSAGE,为首的图卷积方法,在到近期的以 GraphVAE 为首的生成图模型,图表示学习方向的文章如过江之鲫。
专知会员服务
45+阅读 · 2021年6月20日
图表示学习在药物发现中的应用,48页ppt
专知会员服务
94+阅读 · 2021年4月30日
【ECML/PKDD20教程】图表示学习与应用,200页ppt
专知会员服务
90+阅读 · 2020年10月18日
【KDD2020】图神经网络:基础与应用,322页ppt
专知会员服务
75+阅读 · 2020年8月30日
【KDD2020】图神经网络:基础与应用,322页ppt
图表示学习极简教程
PaperWeekly
5+阅读 · 2020年5月27日
图数据表示学习综述论文
专知
52+阅读 · 2019年6月10日
Arxiv
0+阅读 · 2021年10月13日
Arxiv
15+阅读 · 2019年4月4日
Arxiv
13+阅读 · 2018年4月18日
Arxiv
7+阅读 · 2018年1月31日
VIP会员
相关VIP内容
微信扫码咨询专知VIP会员