【EMNLP2019教程】图神经网络GNN的自然语言处理，附315页PPT及作者博士论文下载

介绍

图(graphs)与我们的日常生活紧密相关，从我们的社交网络到最近十分流行的知识图谱（KG）都充斥着图的身影。图是最富表现力的数据结构之一，已被用于建模各种问题。事实上，知识图谱（KG）就是图的结构化表示，其中节点表示实体，边表示实体之间的关系。然而，卷积神经网络(CNN)和递归神经网络(RNN)这些传统的神经网络只适合处理欧几里得数据。面对这种困境，图卷积网络(GCN)顺势而生，被用来解决上面提到的问题并且已经成功的应用到了一些问题上。

作者对GCN的研究

(1)NeuralDater模型，一种基于图卷积网络(GCN)的文献年代测定方法。这是GCN和基于深度神经网络的方法首次应用于文档年代测定问题。

(2)SynGCN模型，该方法是一种灵活的基于图卷积的词嵌入学习方法，该方法利用词对上下文的依赖性而不是线性上下文来学习更加有意义的词嵌入表示。

目前GCN方法的局限性

(1)当前标准的邻域聚合方法对节点数量没有限制，但是过多的节点数量会影响目标节点的表示，这使得几跳（few hops）之后，hub-nodes的词表示就会覆盖几乎覆盖整张图，进而导致hub-nodes的词表示包含了大量的噪声。为解决这个问题，作者相应的提出了ConfGCN模型。

(2)目前大多数的GCN方法都只能够处理无向图。然而，现实生活中更为普遍的一种图是关系图，其中每条边都有一个与之关联的标签和方向。目前处理这些图的方法都饱受过量参数的困扰，而且这些方法仅限于学习节点的表示。为了解决这个问题，作者提出了CompGCN 方法。