【CVPR2021】胶囊网络并不比卷积网络更鲁棒

2021 年 4 月 1 日 专知


论文标题:Capsule Network is Not More Robust than Convolutional Network 论文链接:https://www.zhuanzhi.ai/paper/0dc0a5b70e66bc27bb194fd8eeb1f072


人们普遍认为,胶囊网络比卷积网络更鲁棒。但是,这两个网络之间没有全面的比较,并且还不清楚CapsNet中的哪些组件会影响其鲁棒性。在本文中,我们首先仔细检查CapsNet中的特殊设计,这些特殊设计与通常用于图像分类的ConvNet有所不同。该检查揭示了CapsNet中的五个主要的新/不同组成部分:转换过程,动态路由层,squashing function,除交叉熵损失之外的边际损失以及用于正则化的附加类条件重建损失。除了这些主要差异外,我们还对仿射变换,数字重叠和语义表示三种鲁棒性进行了全面的消融研究。研究表明,一些对CapsNet至关重要的设计实际上会损害其鲁棒性,即动态路由层和转换过程,而其他设计则有益于鲁棒性。基于这些发现,我们仅通过介绍CapsNet成功背后的基本要素,便提出了增强的ConvNets。与CapsNet相比,所提出的简单ConvNets可以实现更好的鲁棒性。



专知便捷查看

便捷下载,请关注专知公众号(点击上方蓝色专知关注)

  • 后台回复“CNR” 就可以获取【CVPR2021】胶囊网络并不比卷积网络更鲁棒》专知下载链接


专知,专业可信的人工智能知识分发 ,让认知协作更快更好!欢迎注册登录专知www.zhuanzhi.ai,获取5000+AI主题干货知识资料!
欢迎微信扫一扫加入专知人工智能知识星球群,获取最新AI专业干货知识教程资料和与专家交流咨询
点击“ 阅读原文 ”,了解使用 专知 ,查看获取5000+AI主题知识资源
登录查看更多
8

相关内容

专知会员服务
40+阅读 · 2021年5月24日
专知会员服务
20+阅读 · 2021年5月1日
专知会员服务
22+阅读 · 2021年5月1日
专知会员服务
29+阅读 · 2021年4月5日
【CVPR2021】动态度量学习
专知会员服务
39+阅读 · 2021年3月30日
【CVPR2021】背景鲁棒的自监督视频表征学习
专知会员服务
16+阅读 · 2021年3月13日
专知会员服务
21+阅读 · 2021年3月9日
【AAAI2021】基于内容迁移的无监督领域自适应语义分割
专知会员服务
17+阅读 · 2020年12月25日
【AAAI2021】 层次图胶囊网络
专知会员服务
82+阅读 · 2020年12月18日
专知会员服务
28+阅读 · 2020年10月24日
【NeurIPS 2020】核基渐进蒸馏加法器神经网络
专知
13+阅读 · 2020年10月19日
【ICML2020】对比多视角表示学习
专知
19+阅读 · 2020年6月28日
【ICML 2020 】小样本学习即领域迁移
专知
5+阅读 · 2020年6月26日
深度多模态表示学习综述论文,22页pdf
专知
30+阅读 · 2020年6月21日
Arxiv
0+阅读 · 2021年6月22日
Bayesian Attention Belief Networks
Arxiv
9+阅读 · 2021年6月9日
Hierarchical Graph Capsule Network
Arxiv
20+阅读 · 2020年12月16日
Compositional Generalization in Image Captioning
Arxiv
3+阅读 · 2019年9月16日
Text classification using capsules
Arxiv
5+阅读 · 2018年8月12日
VIP会员
相关VIP内容
专知会员服务
40+阅读 · 2021年5月24日
专知会员服务
20+阅读 · 2021年5月1日
专知会员服务
22+阅读 · 2021年5月1日
专知会员服务
29+阅读 · 2021年4月5日
【CVPR2021】动态度量学习
专知会员服务
39+阅读 · 2021年3月30日
【CVPR2021】背景鲁棒的自监督视频表征学习
专知会员服务
16+阅读 · 2021年3月13日
专知会员服务
21+阅读 · 2021年3月9日
【AAAI2021】基于内容迁移的无监督领域自适应语义分割
专知会员服务
17+阅读 · 2020年12月25日
【AAAI2021】 层次图胶囊网络
专知会员服务
82+阅读 · 2020年12月18日
专知会员服务
28+阅读 · 2020年10月24日
Top
微信扫码咨询专知VIP会员