论文题目:SOLQ: Segmenting Objects by Learning Queries

中文题目:SOLQ:基于学习查询的物体分割

论文链接:https://www.zhuanzhi.ai/paper/aa83650733efb14101109ce1162e6636

DETR 通过引入 Transformer 和匈牙利匹配,实现了端到端的目标检测。然而,将其拓展至实例分割任务时,会引入过大的计算量,导致无法进行端到端训练,且性能无法满足真实需求。

为解决这一问题,我们结合 DETR 和压缩编码技术,提出端到端的实例分割框架 SOLQ。SOLQ 提出统一的查询(query)表征方式,使用压缩编码方法如DCT等,将二维高分辨率掩码压缩为低维向量,使得三项子任务(分类、定位和分割)能够并行预测。

实验结果表明,SOLQ 能够实现先进的实例分割性能,超越大多数现有方法。此外,我们发现统一的查询(query)表征可以大大提高 DETR 的检测性能。我们希望 SOLQ 可以作为基于 Transformer 的实例分割框架的强大基线。

成为VIP会员查看完整内容
9

相关内容

【AAAI2022】锚点DETR:基于transformer检测器的查询设计
专知会员服务
12+阅读 · 2021年12月31日
NeurIPS 2021丨K-Net: 迈向统一的图像分割
专知会员服务
16+阅读 · 2021年11月25日
【NeurIPS2021】去栅格化的矢量图识别
专知会员服务
14+阅读 · 2021年11月18日
【WSDM2022】基于约束聚类学习离散表示的高效密集检索
专知会员服务
26+阅读 · 2021年11月16日
【NeurIPS2021】用于视频分割的密集无监督学习
专知会员服务
14+阅读 · 2021年11月14日
专知会员服务
13+阅读 · 2021年10月13日
【NeurIPS 2020】通过双向传播的可扩展图神经网络
专知会员服务
27+阅读 · 2020年11月3日
WWW 2020 开源论文 | 异构图Transformer
PaperWeekly
13+阅读 · 2020年4月3日
基于 GNN 的图表示学习
DataFunTalk
9+阅读 · 2020年1月17日
论文解读 | PASS3D:精确且快速的3D点云语义分割
论文浅尝 | 基于属性嵌入的知识图谱实体对齐
开放知识图谱
8+阅读 · 2019年12月29日
论文浅尝 | 基于复杂查询图编码的知识库问答
开放知识图谱
17+阅读 · 2019年7月22日
【泡泡点云时空】联合分割点云中的实例和语义
泡泡机器人SLAM
7+阅读 · 2019年4月27日
非平衡数据集 focal loss 多类分类
AI研习社
33+阅读 · 2019年4月23日
基于二进制哈希编码快速学习的快速图像检索
极市平台
12+阅读 · 2018年5月17日
YOLO升级到v3版,检测速度比R-CNN快1000倍
人工智能头条
10+阅读 · 2018年3月28日
Arxiv
8+阅读 · 2021年9月30日
VIP会员
相关VIP内容
【AAAI2022】锚点DETR:基于transformer检测器的查询设计
专知会员服务
12+阅读 · 2021年12月31日
NeurIPS 2021丨K-Net: 迈向统一的图像分割
专知会员服务
16+阅读 · 2021年11月25日
【NeurIPS2021】去栅格化的矢量图识别
专知会员服务
14+阅读 · 2021年11月18日
【WSDM2022】基于约束聚类学习离散表示的高效密集检索
专知会员服务
26+阅读 · 2021年11月16日
【NeurIPS2021】用于视频分割的密集无监督学习
专知会员服务
14+阅读 · 2021年11月14日
专知会员服务
13+阅读 · 2021年10月13日
【NeurIPS 2020】通过双向传播的可扩展图神经网络
专知会员服务
27+阅读 · 2020年11月3日
相关资讯
WWW 2020 开源论文 | 异构图Transformer
PaperWeekly
13+阅读 · 2020年4月3日
基于 GNN 的图表示学习
DataFunTalk
9+阅读 · 2020年1月17日
论文解读 | PASS3D:精确且快速的3D点云语义分割
论文浅尝 | 基于属性嵌入的知识图谱实体对齐
开放知识图谱
8+阅读 · 2019年12月29日
论文浅尝 | 基于复杂查询图编码的知识库问答
开放知识图谱
17+阅读 · 2019年7月22日
【泡泡点云时空】联合分割点云中的实例和语义
泡泡机器人SLAM
7+阅读 · 2019年4月27日
非平衡数据集 focal loss 多类分类
AI研习社
33+阅读 · 2019年4月23日
基于二进制哈希编码快速学习的快速图像检索
极市平台
12+阅读 · 2018年5月17日
YOLO升级到v3版,检测速度比R-CNN快1000倍
人工智能头条
10+阅读 · 2018年3月28日
微信扫码咨询专知VIP会员