【CVPR2023】魔鬼在查询中:面向真实世界医学图像分割和分布外定位的改进掩模transformer

2023 年 4 月 5 日 专知

现实世界的医学图像分割具有巨大的对象长尾复杂性,其中尾条件与相对罕见的疾病相关,具有临床意义。一个值得信赖的医疗人工智能算法应该证明其在尾部条件下的有效性,以避免在这些分布不均(OOD)情况下的临床危险损伤。在本文中,我们采用掩码Transformers 中的对象查询的概念来制定语义分割作为软聚类分配。在训练过程中,查询符合inlier的特征级聚类中心。因此,在现实场景中对医学图像进行推理时,像素与查询之间的相似性检测并定位OOD区域。我们将这种OOD本地化称为MaxQuery。此外,现实世界医学图像的前景,无论是OOD对象或内层,都是病变。它们之间的差异小于前景和背景之间的差异,可能会误导对象查询冗余地集中在背景上。因此,我们提出了一个查询分布(QD)损失,在查询级别强制分割目标和其他区域之间的明确边界,改善了inlier分割和OOD指示。我们提出的框架在两个真实世界的分割任务上进行了测试,即胰腺和肝脏肿瘤的分割,在AUROC上平均表现为7.39%,在AUPR上平均表现为14.69%,在FPR95上平均表现为13.79%,用于OOD定位。另一方面,与领先的基线nnUNet相比,我们的框架将inlier分割的性能平均提高了5.27%。


专知便捷查看

便捷下载,请关注专知公众号(点击上方蓝色专知关注)

  • 后台回复或发消息“AMTM” 就可以获取《【CVPR2023】魔鬼在查询中:面向真实世界医学图像分割和分布外定位的改进掩模transformer》专知下载链接

                       
专知,专业可信的人工智能知识分发 ,让认知协作更快更好!欢迎注册登录专知www.zhuanzhi.ai,获取100000+AI(AI与军事、医药、公安等)主题干货知识资料!
欢迎微信扫一扫加入专知人工智能知识星球群,获取最新AI专业干货知识教程资料和与专家交流咨询
点击“ 阅读原文 ”,了解使用 专知 ,查看获取100000+AI主题知识资料

登录查看更多
1

相关内容

医学影像是指为了医疗或医学研究,对人体或人体某部分,以非侵入方式取得内部组织影像的技术与处理过程。它包含以下两个相对独立的研究方向:医学成像系统(medical imaging system)和医学图像处理(medical image processing)。前者是指图像行成的过程,包括对成像机理、成像设备、成像系统分析等问题的研究;后者是指对已经获得的图像作进一步的处理,其目的是或者是使原来不够清晰的图像复原,或者是为了突出图像中的某些特征信息,或者是对图像做模式分类等等。
【CVPR2023】MSeg3D:面向自动驾驶的多模态3D语义分割
专知会员服务
15+阅读 · 2023年3月17日
【NeurIPS2022】基于结构聚类的自监督异构图预训练
专知会员服务
23+阅读 · 2022年10月20日
【KDD2022】自监督超图Transformer推荐系统
专知会员服务
33+阅读 · 2022年8月1日
【CVPR2022】EDTER:基于Transformer的边缘检测(CVPR2022)
专知会员服务
32+阅读 · 2022年3月18日
【CVPR2022】双曲图像分割
专知会员服务
18+阅读 · 2022年3月14日
专知会员服务
32+阅读 · 2021年7月27日
【CVPR2021】自监督几何感知
专知会员服务
45+阅读 · 2021年3月6日
【CVPR2021】用Transformers无监督预训练进行目标检测
专知会员服务
56+阅读 · 2021年3月3日
【KDD2022】自监督超图Transformer推荐系统
专知
1+阅读 · 2022年8月1日
【ICML2022】时序自监督视频transformer
专知
1+阅读 · 2022年7月28日
【ICML2022】在线决策Transformer
专知
2+阅读 · 2022年7月27日
【CVPR2021】跨模态检索的概率嵌入
专知
17+阅读 · 2021年3月2日
国家自然科学基金
0+阅读 · 2017年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
2+阅读 · 2012年12月31日
国家自然科学基金
3+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
Arxiv
0+阅读 · 2023年5月30日
Arxiv
31+阅读 · 2020年9月21日
VIP会员
相关VIP内容
【CVPR2023】MSeg3D:面向自动驾驶的多模态3D语义分割
专知会员服务
15+阅读 · 2023年3月17日
【NeurIPS2022】基于结构聚类的自监督异构图预训练
专知会员服务
23+阅读 · 2022年10月20日
【KDD2022】自监督超图Transformer推荐系统
专知会员服务
33+阅读 · 2022年8月1日
【CVPR2022】EDTER:基于Transformer的边缘检测(CVPR2022)
专知会员服务
32+阅读 · 2022年3月18日
【CVPR2022】双曲图像分割
专知会员服务
18+阅读 · 2022年3月14日
专知会员服务
32+阅读 · 2021年7月27日
【CVPR2021】自监督几何感知
专知会员服务
45+阅读 · 2021年3月6日
【CVPR2021】用Transformers无监督预训练进行目标检测
专知会员服务
56+阅读 · 2021年3月3日
相关基金
国家自然科学基金
0+阅读 · 2017年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
2+阅读 · 2012年12月31日
国家自然科学基金
3+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
Top
微信扫码咨询专知VIP会员