Deep neural networks have been applied in many computer vision tasks and achieved state-of-the-art performance. However, misclassification will occur when DNN predicts adversarial examples which add human-imperceptible adversarial noise to natural examples. This limits the application of DNN in security-critical fields. To alleviate this problem, we first conducted an empirical analysis of the latent features of both adversarial and natural examples and found the similarity matrix of natural examples is more compact than those of adversarial examples. Motivated by this observation, we propose \textbf{L}atent \textbf{F}eature \textbf{R}elation \textbf{C}onsistency (\textbf{LFRC}), which constrains the relation of adversarial examples in latent space to be consistent with the natural examples. Importantly, our LFRC is orthogonal to the previous method and can be easily combined with them to achieve further improvement. To demonstrate the effectiveness of LFRC, we conduct extensive experiments using different neural networks on benchmark datasets. For instance, LFRC can bring 0.78\% further improvement compared to AT, and 1.09\% improvement compared to TRADES, against AutoAttack on CIFAR10. Code is available at https://github.com/liuxingbin/LFRC.


翻译:------ 潜在特征关系一致性用于对抗鲁棒性 深度神经网络已经在许多计算机视觉任务中应用,并实现了最先进的性能。然而,当DNN预测添加了人类无法感知的对抗性噪声的对抗性示例时,会出现误分类。这限制了DNN在安全关键领域的应用。为了缓解这种问题,我们首先对对抗性和自然示例的潜在特征进行了实证分析,并发现自然示例的相似性矩阵比对抗性示例更紧凑。受到这一观察的启发,我们提出了\"潜在特征关系一致性\"(LFRC),以使潜在空间中的对抗性示例的关系与自然示例保持一致。值得注意的是,我们的LFRC与先前的方法正交,并且可以与它们轻松结合以实现更进一步的改进。我们在基准数据集上使用不同的神经网络进行了广泛实验,以证明LFRC的有效性。例如,LFRC与AT相比,可以提供进一步的0.78\%改进,并且与TRADES在CIFAR10上的自动攻击相比,可以提供1.09\%的改进。代码可在https://github.com/liuxingbin/LFRC上获取。

0
下载
关闭预览

相关内容

《探索具有对抗性混合的神经网络防御》2023最新79页论文
【ICML2023】特征和标签偏移下时间序列的域适应
专知会员服务
24+阅读 · 2023年4月26日
【AAAI2023】对抗性权重扰动提高图神经网络的泛化能力
专知会员服务
18+阅读 · 2022年12月12日
【AAAI 2022】一致性信息瓶颈在域泛化中的应用
专知会员服务
24+阅读 · 2022年1月15日
专知会员服务
20+阅读 · 2021年8月26日
【CVPR2021】通道注意力的高效移动网络设计
专知会员服务
18+阅读 · 2021年4月27日
知识图谱表示学习的对抗鲁棒性
专知
2+阅读 · 2022年10月7日
IJCAI 2022 | 超越同质性的图神经网络
PaperWeekly
0+阅读 · 2022年9月6日
【ICML2019】IanGoodfellow自注意力GAN的代码与PPT
GAN生成式对抗网络
18+阅读 · 2019年6月30日
论文浅尝 | 用于知识图中链接预测的嵌入方法 SimplE
开放知识图谱
22+阅读 · 2019年4月3日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2014年12月31日
国家自然科学基金
3+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
3+阅读 · 2009年12月31日
Arxiv
37+阅读 · 2021年9月28日
Arxiv
12+阅读 · 2020年12月10日
Generative Adversarial Networks: A Survey and Taxonomy
VIP会员
相关VIP内容
《探索具有对抗性混合的神经网络防御》2023最新79页论文
【ICML2023】特征和标签偏移下时间序列的域适应
专知会员服务
24+阅读 · 2023年4月26日
【AAAI2023】对抗性权重扰动提高图神经网络的泛化能力
专知会员服务
18+阅读 · 2022年12月12日
【AAAI 2022】一致性信息瓶颈在域泛化中的应用
专知会员服务
24+阅读 · 2022年1月15日
专知会员服务
20+阅读 · 2021年8月26日
【CVPR2021】通道注意力的高效移动网络设计
专知会员服务
18+阅读 · 2021年4月27日
相关基金
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2014年12月31日
国家自然科学基金
3+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
3+阅读 · 2009年12月31日
Top
微信扫码咨询专知VIP会员