会员服务
图神经网络 · 多模态检索 ·
2020 年 10 月 9 日
【图神经网络多模态检索】Multi-Modal Retrieval using Graph Neural Networks
专知会员服务
专知会员服务
专知，提供专业可信的知识分发服务，让认知协作更快更好！

大多数真实世界的图像检索应用程序，如Adobe Stock，这是一个存储图片和插图的市场，需要一种方法让用户找到图像，这些图像在视觉上(即美学上)和概念上(即包含相同的突出对象)作为查询图像。从图像中学习视觉-语义表征是图像检索研究的一个热点问题。基于图像概念或属性的过滤通常通过基于索引的过滤(例如文本标签)或在最初的基于视觉嵌入的检索后重新排序来实现。在本文中，我们学习了一个嵌入在同一高维空间中的联合视觉和概念。这个联合模型为用户提供了对结果集语义的细粒度控制，允许他们更快速地浏览图像目录。我们将可视化和概念关系建模为图形结构，通过节点邻域捕获丰富的信息。这种图结构帮助我们使用图神经网络学习多模态节点嵌入。我们还引入了一种新的基于选择性邻域连接的推理时间控制，允许用户控制检索算法。我们对MS-COCO数据集图像检索下游相关任务进行定量评估，对MS-COCO和Adobe库存数据集进行定性评估。

https://arxiv.org/abs/2010.01666

成为VIP会员查看完整内容
https://arxiv.org/abs/2010.01666
Multi-Modal Retrieval using Graph Neural Networks
29

相关内容

图神经网络 (GNN) 是一种连接模型，它通过图的节点之间的消息传递来捕捉图的依赖关系。与标准神经网络不同的是，图神经网络保留了一种状态，可以表示来自其邻域的具有任意深度的信息。近年来，图神经网络(GNN)在社交网络、知识图、推荐系统、问答系统甚至生命科学等各个领域得到了越来越广泛的应用。

知识荟萃

精品入门和进阶教程、论文和代码整理等

更多

查看相关VIP内容、论文、资讯等
【KDD2020】更深的图神经网络，Towards Deeper Graph Neural Networks
【KDD2020】更深的图神经网络，Towards Deeper Graph Neural Networks
专知会员服务
89+阅读 · 2020年7月22日
【IJCAJ 2020】多通道神经网络 Multi-Channel Graph Neural Networks
【IJCAJ 2020】多通道神经网络 Multi-Channel Graph Neural Networks
专知会员服务
25+阅读 · 2020年7月19日
【WWW 2019】异质图注意力网络，Heterogeneous Graph Attention Network
【WWW 2019】异质图注意力网络，Heterogeneous Graph Attention Network
专知会员服务
74+阅读 · 2020年6月14日
【清华大学】图随机神经网络，Graph Random Neural Networks
【清华大学】图随机神经网络，Graph Random Neural Networks
专知会员服务
154+阅读 · 2020年5月26日
【SIGIR2020-中科院】TAGNN: 基于会话推荐的目标注意力图神经网络，TAGNN: Target Attentive Graph Neural Networks for Session-based Recommendation
【SIGIR2020-中科院】TAGNN: 基于会话推荐的目标注意力图神经网络，TAGNN: Target Attentive Graph Neural Networks for Session-based Recommendation
专知会员服务
41+阅读 · 2020年5月10日
近期必读的5篇顶会WWW 2020【图神经网络（GNN）】相关论文-Part3
近期必读的5篇顶会WWW 2020【图神经网络（GNN）】相关论文-Part3
专知会员服务
56+阅读 · 2020年3月31日
Capsule Networks，胶囊网络，57页ppt，布法罗大学
Capsule Networks，胶囊网络，57页ppt，布法罗大学
专知会员服务
67+阅读 · 2020年2月29日
抢鲜看！近期必读的6篇 WWW 2020【图神经网络（GNN）】相关论文
抢鲜看！近期必读的6篇 WWW 2020【图神经网络（GNN）】相关论文
专知会员服务
59+阅读 · 2020年2月18日
【WWW2020-北邮】结构深度聚类网络，Structural Deep Clustering Network
【WWW2020-北邮】结构深度聚类网络，Structural Deep Clustering Network
专知会员服务
92+阅读 · 2020年2月14日
【AAAI2020】多模态注意力语义图嵌入多标签分类（Cross-Modality Attention with Semantic Graph Embedding for Multi-Label Classification）
【AAAI2020】多模态注意力语义图嵌入多标签分类（Cross-Modality Attention with Semantic Graph Embedding for Multi-Label Classification）
专知会员服务
91+阅读 · 2019年12月22日
【KDD2020】更深的图神经网络，Towards Deeper Graph Neural Networks
【KDD2020】更深的图神经网络，Towards Deeper Graph Neural Networks
专知
45+阅读 · 2020年7月22日
图表示学习Graph Embedding综述
图表示学习Graph Embedding综述
AINLP
33+阅读 · 2020年5月17日
AAAI 2020：速读8篇图神经网络（GNN）论文，附下载
AAAI 2020：速读8篇图神经网络（GNN）论文，附下载
新智元
22+阅读 · 2020年1月17日
【NeurIPS 2019】vGraph：联合节点检测与节点表示生成模型
【NeurIPS 2019】vGraph：联合节点检测与节点表示生成模型
专知
23+阅读 · 2019年12月21日
近期必读的9篇 NeurIPS 2019【图神经网络（GNN）】相关论文
近期必读的9篇 NeurIPS 2019【图神经网络（GNN）】相关论文
专知
78+阅读 · 2019年12月3日
图神经网络（Graph Neural Networks，GNN）综述
图神经网络（Graph Neural Networks，GNN）综述
极市平台
104+阅读 · 2019年11月27日
Graph Neural Network（GNN）最全资源整理分享
Graph Neural Network（GNN）最全资源整理分享
深度学习与NLP
339+阅读 · 2019年7月9日
近期必读的9篇CVPR 2019【图神经网络（GNN）+CV】相关论文和代码
近期必读的9篇CVPR 2019【图神经网络（GNN）+CV】相关论文和代码
专知
119+阅读 · 2019年6月25日
近期必读的6篇【图神经网络的推荐（GNN+R）】相关论文和代码（WWW、SIGIR、WSDM）
近期必读的6篇【图神经网络的推荐（GNN+R）】相关论文和代码（WWW、SIGIR、WSDM）
专知
199+阅读 · 2019年5月7日
图卷积神经网络(GCN)文本分类详述
图卷积神经网络(GCN)文本分类详述
专知
279+阅读 · 2019年4月5日
A Survey on The Expressive Power of Graph Neural Networks
A Survey on The Expressive Power of Graph Neural Networks
Arxiv
7+阅读 · 2020年3月9日
Hyper-SAGNN: a self-attention based graph neural network for hypergraphs
Hyper-SAGNN: a self-attention based graph neural network for hypergraphs
Arxiv
17+阅读 · 2019年11月6日
Modeling question asking using neural program generation
Arxiv
4+阅读 · 2019年9月26日
HyperGCN: A New Method of Training Graph Convolutional Networks on Hypergraphs
HyperGCN: A New Method of Training Graph Convolutional Networks on Hypergraphs
Arxiv
13+阅读 · 2019年5月22日
Self-Attention Graph Pooling
Self-Attention Graph Pooling
Arxiv
5+阅读 · 2019年4月17日
Confidence-based Graph Convolutional Networks for Semi-Supervised Learning
Confidence-based Graph Convolutional Networks for Semi-Supervised Learning
Arxiv
7+阅读 · 2019年2月12日
A sequential guiding network with attention for image captioning
A sequential guiding network with attention for image captioning
Arxiv
5+阅读 · 2019年2月8日
HyperGCN: Hypergraph Convolutional Networks for Semi-Supervised Classification
HyperGCN: Hypergraph Convolutional Networks for Semi-Supervised Classification
Arxiv
13+阅读 · 2018年9月7日
Modeling Text with Graph Convolutional Network for Cross-Modal Information Retrieval
Arxiv
3+阅读 · 2018年2月13日
Graph Attention Networks
Arxiv
10+阅读 · 2018年2月4日
VIP会员
相关主题
图神经网络
多模态检索
相关VIP内容
【KDD2020】更深的图神经网络，Towards Deeper Graph Neural Networks
【KDD2020】更深的图神经网络，Towards Deeper Graph Neural Networks
专知会员服务
89+阅读 · 2020年7月22日
【IJCAJ 2020】多通道神经网络 Multi-Channel Graph Neural Networks
【IJCAJ 2020】多通道神经网络 Multi-Channel Graph Neural Networks
专知会员服务
25+阅读 · 2020年7月19日
【WWW 2019】异质图注意力网络，Heterogeneous Graph Attention Network
【WWW 2019】异质图注意力网络，Heterogeneous Graph Attention Network
专知会员服务
74+阅读 · 2020年6月14日
【清华大学】图随机神经网络，Graph Random Neural Networks
【清华大学】图随机神经网络，Graph Random Neural Networks
专知会员服务
154+阅读 · 2020年5月26日
【SIGIR2020-中科院】TAGNN: 基于会话推荐的目标注意力图神经网络，TAGNN: Target Attentive Graph Neural Networks for Session-based Recommendation
【SIGIR2020-中科院】TAGNN: 基于会话推荐的目标注意力图神经网络，TAGNN: Target Attentive Graph Neural Networks for Session-based Recommendation
专知会员服务
41+阅读 · 2020年5月10日
近期必读的5篇顶会WWW 2020【图神经网络（GNN）】相关论文-Part3
近期必读的5篇顶会WWW 2020【图神经网络（GNN）】相关论文-Part3
专知会员服务
56+阅读 · 2020年3月31日
Capsule Networks，胶囊网络，57页ppt，布法罗大学
Capsule Networks，胶囊网络，57页ppt，布法罗大学
专知会员服务
67+阅读 · 2020年2月29日
抢鲜看！近期必读的6篇 WWW 2020【图神经网络（GNN）】相关论文
抢鲜看！近期必读的6篇 WWW 2020【图神经网络（GNN）】相关论文
专知会员服务
59+阅读 · 2020年2月18日
【WWW2020-北邮】结构深度聚类网络，Structural Deep Clustering Network
【WWW2020-北邮】结构深度聚类网络，Structural Deep Clustering Network
专知会员服务
92+阅读 · 2020年2月14日
【AAAI2020】多模态注意力语义图嵌入多标签分类（Cross-Modality Attention with Semantic Graph Embedding for Multi-Label Classification）
【AAAI2020】多模态注意力语义图嵌入多标签分类（Cross-Modality Attention with Semantic Graph Embedding for Multi-Label Classification）
专知会员服务
91+阅读 · 2019年12月22日
热门VIP内容
相关资讯
【KDD2020】更深的图神经网络，Towards Deeper Graph Neural Networks
【KDD2020】更深的图神经网络，Towards Deeper Graph Neural Networks
专知
45+阅读 · 2020年7月22日
图表示学习Graph Embedding综述
图表示学习Graph Embedding综述
AINLP
33+阅读 · 2020年5月17日
AAAI 2020：速读8篇图神经网络（GNN）论文，附下载
AAAI 2020：速读8篇图神经网络（GNN）论文，附下载
新智元
22+阅读 · 2020年1月17日
【NeurIPS 2019】vGraph：联合节点检测与节点表示生成模型
【NeurIPS 2019】vGraph：联合节点检测与节点表示生成模型
专知
23+阅读 · 2019年12月21日
近期必读的9篇 NeurIPS 2019【图神经网络（GNN）】相关论文
近期必读的9篇 NeurIPS 2019【图神经网络（GNN）】相关论文
专知
78+阅读 · 2019年12月3日
图神经网络（Graph Neural Networks，GNN）综述
图神经网络（Graph Neural Networks，GNN）综述
极市平台
104+阅读 · 2019年11月27日
Graph Neural Network（GNN）最全资源整理分享
Graph Neural Network（GNN）最全资源整理分享
深度学习与NLP
339+阅读 · 2019年7月9日
近期必读的9篇CVPR 2019【图神经网络（GNN）+CV】相关论文和代码
近期必读的9篇CVPR 2019【图神经网络（GNN）+CV】相关论文和代码
专知
119+阅读 · 2019年6月25日
近期必读的6篇【图神经网络的推荐（GNN+R）】相关论文和代码（WWW、SIGIR、WSDM）
近期必读的6篇【图神经网络的推荐（GNN+R）】相关论文和代码（WWW、SIGIR、WSDM）
专知
199+阅读 · 2019年5月7日
图卷积神经网络(GCN)文本分类详述
图卷积神经网络(GCN)文本分类详述
专知
279+阅读 · 2019年4月5日
相关论文
A Survey on The Expressive Power of Graph Neural Networks
A Survey on The Expressive Power of Graph Neural Networks
Arxiv
7+阅读 · 2020年3月9日
Hyper-SAGNN: a self-attention based graph neural network for hypergraphs
Hyper-SAGNN: a self-attention based graph neural network for hypergraphs
Arxiv
17+阅读 · 2019年11月6日
Modeling question asking using neural program generation
Arxiv
4+阅读 · 2019年9月26日
HyperGCN: A New Method of Training Graph Convolutional Networks on Hypergraphs
HyperGCN: A New Method of Training Graph Convolutional Networks on Hypergraphs
Arxiv
13+阅读 · 2019年5月22日
Self-Attention Graph Pooling
Self-Attention Graph Pooling
Arxiv
5+阅读 · 2019年4月17日
Confidence-based Graph Convolutional Networks for Semi-Supervised Learning
Confidence-based Graph Convolutional Networks for Semi-Supervised Learning
Arxiv
7+阅读 · 2019年2月12日
A sequential guiding network with attention for image captioning
A sequential guiding network with attention for image captioning
Arxiv
5+阅读 · 2019年2月8日
HyperGCN: Hypergraph Convolutional Networks for Semi-Supervised Classification
HyperGCN: Hypergraph Convolutional Networks for Semi-Supervised Classification
Arxiv
13+阅读 · 2018年9月7日
Modeling Text with Graph Convolutional Network for Cross-Modal Information Retrieval
Arxiv
3+阅读 · 2018年2月13日
Graph Attention Networks
Arxiv
10+阅读 · 2018年2月4日
微信扫码咨询专知VIP会员
Top