图卷积神经网络(Graph convolutional networks GCNs)是一种通过堆叠图卷积层来集成节点高阶邻域信息的神经网络,被广泛应用于许多网络分析任务(节点分类、链路预测等)。然而,GCNs存在着不可避免的局限性:拓扑局限性(过度平滑,局部同质性),这些严重限制了其表示网络的能力。现有的工作(如拓扑优化、自监督等)主要通过将特征在拓扑上进行卷积来缓解GCNs的拓扑限制,这使得卷积结果严重依赖于网络拓扑结构。与此同时,在真实世界中,网络很多是富文本网络(即text-rich networks),多数现有方法在卷积时仅考虑了全局(文档)级别的特征信息,而忽略了局部(单词)级别的文本序列信息。为了解决这些问题,我们提出了一种新的GCN架构(BiTe-GCN),对拓扑结构和特征的进行联合卷积进而学习更好的节点特征。具体来说,我们首先将原始的富文本网络增广为一个双类型(bi-typed)异构网络,进而获取全局(文档)级别信息和局部文本序列信息。其次,我们设计了一种有辨别力的卷积机制,在同一系统中实现拓扑结构和特征的联合卷积,并针对不同目标任务自动学习拓扑结构与特征分别对目标任务的贡献。

https://arxiv.org/abs/2010.12157

成为VIP会员查看完整内容
17

相关内容

【AAAI2021】面向交通需求预测的耦合层图卷积
专知会员服务
45+阅读 · 2021年1月31日
AAAI2021 | 学习预训练图神经网络
专知会员服务
115+阅读 · 2021年1月28日
【WSDM2021】多交互注意力网络细粒度特征学习的CTR预测
专知会员服务
24+阅读 · 2020年12月27日
专知会员服务
25+阅读 · 2020年12月17日
[WSDM2021]用于边缘流异常检测的频率因子分解
专知会员服务
11+阅读 · 2020年11月24日
【WSDM2021】拓扑去噪的鲁棒图神经网络
专知会员服务
26+阅读 · 2020年11月14日
KDD20 | AM-GCN:自适应多通道图卷积网络
专知会员服务
39+阅读 · 2020年8月26日
【KDD2020】自适应多通道图卷积神经网络
专知会员服务
119+阅读 · 2020年7月9日
KDD20 | AM-GCN:自适应多通道图卷积网络
专知
8+阅读 · 2020年8月26日
AAAI 2020 | 北大:图卷积中的多阶段自监督学习算法
AI科技评论
8+阅读 · 2020年1月12日
基于图卷积文本模型的跨模态信息检索
专知
9+阅读 · 2019年8月3日
HAN:基于双层注意力机制的异质图深度神经网络
黑龙江大学自然语言处理实验室
19+阅读 · 2019年5月7日
CVPR 2018 | 无监督语义分割之全卷积域适应网络
极市平台
8+阅读 · 2018年6月28日
全卷积注意网络的细粒度识别
计算机视觉战队
5+阅读 · 2017年11月25日
Arxiv
19+阅读 · 2020年7月13日
Arxiv
15+阅读 · 2020年2月5日
A Comprehensive Survey on Graph Neural Networks
Arxiv
13+阅读 · 2019年3月10日
Arxiv
10+阅读 · 2019年2月19日
Panoptic Feature Pyramid Networks
Arxiv
3+阅读 · 2019年1月8日
VIP会员
相关主题
相关VIP内容
【AAAI2021】面向交通需求预测的耦合层图卷积
专知会员服务
45+阅读 · 2021年1月31日
AAAI2021 | 学习预训练图神经网络
专知会员服务
115+阅读 · 2021年1月28日
【WSDM2021】多交互注意力网络细粒度特征学习的CTR预测
专知会员服务
24+阅读 · 2020年12月27日
专知会员服务
25+阅读 · 2020年12月17日
[WSDM2021]用于边缘流异常检测的频率因子分解
专知会员服务
11+阅读 · 2020年11月24日
【WSDM2021】拓扑去噪的鲁棒图神经网络
专知会员服务
26+阅读 · 2020年11月14日
KDD20 | AM-GCN:自适应多通道图卷积网络
专知会员服务
39+阅读 · 2020年8月26日
【KDD2020】自适应多通道图卷积神经网络
专知会员服务
119+阅读 · 2020年7月9日
相关资讯
KDD20 | AM-GCN:自适应多通道图卷积网络
专知
8+阅读 · 2020年8月26日
AAAI 2020 | 北大:图卷积中的多阶段自监督学习算法
AI科技评论
8+阅读 · 2020年1月12日
基于图卷积文本模型的跨模态信息检索
专知
9+阅读 · 2019年8月3日
HAN:基于双层注意力机制的异质图深度神经网络
黑龙江大学自然语言处理实验室
19+阅读 · 2019年5月7日
CVPR 2018 | 无监督语义分割之全卷积域适应网络
极市平台
8+阅读 · 2018年6月28日
全卷积注意网络的细粒度识别
计算机视觉战队
5+阅读 · 2017年11月25日
相关论文
Arxiv
19+阅读 · 2020年7月13日
Arxiv
15+阅读 · 2020年2月5日
A Comprehensive Survey on Graph Neural Networks
Arxiv
13+阅读 · 2019年3月10日
Arxiv
10+阅读 · 2019年2月19日
Panoptic Feature Pyramid Networks
Arxiv
3+阅读 · 2019年1月8日
微信扫码咨询专知VIP会员