利用辅助的异常值数据集来规范机器学习模型对于检测分布外(OOD)数据和安全预测已展现出潜力。由于数据收集和清理的劳动强度,自动生成异常值数据一直是一个长期渴望的替代方案。尽管有吸引力,但在高维像素空间生成照片逼真的异常值一直是该领域的一个开放性挑战。为了解决这个问题,本文提出了一种新的框架DREAM-OOD,它能够通过扩散模型,仅使用分布内(ID)数据和类别,来想象照片逼真的异常值。具体来说,DREAM-OOD基于ID数据学习了一个文本条件的潜在空间,然后通过潜在在低可能性区域抽样异常值,这些可以通过扩散模型解码成图像。与以前的工作[18,98]不同,DREAM-OOD可以直接在像素空间中可视化和理解想象出来的异常值。我们进行了全面的定量和定性研究以理解DREAM-OOD的功效,并表明,使用DREAM-OOD生成的样本进行训练可以提高OOD检测性能。代码可在 https://github.com/deeplearning-wisc/dream-ood 公开获取。

成为VIP会员查看完整内容
23

相关内容

扩散模型是近年来快速发展并得到广泛关注的生成模型。它通过一系列的加噪和去噪过程,在复杂的图像分布和高斯分布之间建立联系,使得模型最终能将随机采样的高斯噪声逐步去噪得到一张图像。
【NeurIPS2023】将持续学习重新定义为序列建模
专知会员服务
33+阅读 · 2023年10月19日
【NeurIPS2023】探索具有对抗环境设计的通用强化学习算法
【NeurIPS2023】大型预训练模型的等变自适应
专知会员服务
31+阅读 · 2023年10月4日
专知会员服务
21+阅读 · 2021年9月27日
专知会员服务
18+阅读 · 2021年9月23日
【WWW2021】通过异构GNN知识保留的增量社会事件检测
专知会员服务
20+阅读 · 2021年1月24日
【ACM MM2020】跨模态分布匹配的半监督多模态情感识别
专知会员服务
42+阅读 · 2020年9月8日
【ICML2020】持续终身学习的神经主题建模
专知会员服务
37+阅读 · 2020年6月22日
【KDD2020】动态知识图谱的多事件预测
专知
88+阅读 · 2020年8月31日
【KDD2020】图神经网络生成式预训练
专知
22+阅读 · 2020年7月3日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
4+阅读 · 2014年12月31日
国家自然科学基金
4+阅读 · 2014年12月31日
Arxiv
157+阅读 · 2023年4月20日
A Survey of Large Language Models
Arxiv
398+阅读 · 2023年3月31日
Arxiv
139+阅读 · 2023年3月24日
VIP会员
相关VIP内容
【NeurIPS2023】将持续学习重新定义为序列建模
专知会员服务
33+阅读 · 2023年10月19日
【NeurIPS2023】探索具有对抗环境设计的通用强化学习算法
【NeurIPS2023】大型预训练模型的等变自适应
专知会员服务
31+阅读 · 2023年10月4日
专知会员服务
21+阅读 · 2021年9月27日
专知会员服务
18+阅读 · 2021年9月23日
【WWW2021】通过异构GNN知识保留的增量社会事件检测
专知会员服务
20+阅读 · 2021年1月24日
【ACM MM2020】跨模态分布匹配的半监督多模态情感识别
专知会员服务
42+阅读 · 2020年9月8日
【ICML2020】持续终身学习的神经主题建模
专知会员服务
37+阅读 · 2020年6月22日
相关基金
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
4+阅读 · 2014年12月31日
国家自然科学基金
4+阅读 · 2014年12月31日
微信扫码咨询专知VIP会员