专家推荐|高维数据表示:由稀疏先验到深度模型

2020 年 3 月 7 日 中国图象图形学报

在高维数据(如图像、多媒体信号、生物医学信号、多源遥感信息)智能信息处理方面,寻找更简洁、高效的数据表示方法是研究者一直追求的目标。


图片来源网络


图图为大家带来西安电子科技大学人工智能学院,董伟生教授的报告——《高维数据表示:由稀疏先验到深度模型》,该报告聚焦对经典稀疏域模型与深度学习模型的结合,形成更为高效的高维数据建模与表示方法。


为便于图粉了解报告的精彩内容,南京理工大学肖亮教授作为本期微推的推荐专家,特别撰写了推荐前言。


关注我们
一起努力



数据建模与表示方法学的发展趋势是从浅层表示到深度表示。首先,随着高维信号冗余与稀疏表示理论的兴起,研究者充分意识到需利用高维数据分布的拓扑几何与稀疏结构来学习数据的有效表示,并发展出一大类稀疏表示方法,其关键是字典学习和稀疏性度量;前者需要提高学习字典的“紧致性”和“类属鉴别性”,后者需要增强稀疏性度量的结构性。



稀疏域模型(SPARSE LAND)及其信号处理方法于2006年前后,在国际信号处理界展开如火如荼的研究,并与压缩感知重建,线性反问题(如图像去噪、去模糊和超分辨)的稀疏正则化处理、稀疏信号盲源分解以及稀疏特征选择等多个方向发展了系列应用算法。


向量稀疏的处理方法虽然取得较好的应用,但忽略图像信号内在的几何结构性,由此矩阵低秩表示理论已成为高维数据机器学习和计算机视觉等的崭新理论。本质上认为高维数据存在于低维子空间,数据低秩性是向量稀疏性在高维情形下(如矩阵结构、张量结构)的推广,更能体现数据的结构化稀疏性。因此以矩阵和张量低秩表示方法为代表发展了系列高阶稀疏性分析方法。



基于人工特征和浅层学习的方法,很难捕获非线性分布式抽象特征。随着深度学习的兴起,基于深度神经网络的视觉信息处理方法日新月异,为机器视觉与人工智能提供崭新的研究方法。但是大数据驱动的深度学习也面临样本不足以及算力不够等挑战,如何结合经典的稀疏域模型与深度学习模型,形成更为高效的高维数据建模与表示方法,是研究者迫切关心的问题。


本期董伟生教授从以下几方面展开报告:

  • 从图像信息获取的过程出发,分享了图像处理中一系列重要反问题背景,包括:图像去噪、图像去模糊、图像超分辨、计算成像和压缩感知等的研究背景。

  •  从贝叶斯建模方法学的角度,分析了稀疏性先验正则化机理;并介绍了重要的稀疏正则化模型的优化方法,包括迭代阈值法(IST)和广泛使用的交替方向乘子法(ADMM)。

  • 分享了组群稀疏表示(Group Sparse Representation)的机理及其应用。

  • 介绍了高斯尺度混合模型与稀疏表示的结合方法,及其在图像反问题中的应用,包括鲁棒PCA等。

  • 从机器学习的角度,模块化分解分析了超分辨应用中稀疏学习逼近等模型结构。

  • 介绍了CNN等深度学习网络在图像反问题处理中的建模思想,由此进一步剖析了模型驱动的CNN及其应用实例。

文末还有图图为大家准备的PPT福利哟





推荐阅读


楼幸欣, 唐向宏, 张越. 相似匹配块组的稀疏表示图像修复[J]. 中国图象图形学报, 2019, 24(7): 1055-1066

http://www.cjig.cn/html/jig/2019/7/20190705.htm


石亮, 那天, 宋晓宁, 朱玉全. 利用CNN和PCA约束优化模型实现稀疏表示分类[J]. 中国图象图形学报, 2019, 24(4): 503-512

http://www.cjig.cn/html/jig/2019/4/20190402.htm


洪施展, 曹铁勇, 方正, 项圣凯. 稀疏深度特征对传统显著性检测的优化[J]. 中国图象图形学报, 2019, 24(9): 1493-1503

http://www.cjig.cn/html/jig/2019/9/20190908.htm


报告专家介绍

董伟生 西安电子科技大学人工智能学院教授、博导,入选中组部“万人计划”青年拔尖人才、教育部“青年长江学者”特聘教授,获国家优秀青年科学基金资助,入选陕西省特支计划青年科技创新领军人才,学校“华山学者”计划。


主要从事深度学习、图像稀疏与低秩表示、图像视频表达与处理、计算机视觉和模式识别等领域的研究工作。


E-mail:wsdong@mail.xidian.edu.cn

个人主页:

https://web.xidian.edu.cn/wsdong/



推荐专家介绍

肖亮,南京理工大学计算机科学与工程学院教授,博士生导师,工学博士。教育部高维信息智能感知与系统重点实验室副主任,江苏省光谱信息感知与系统重点实验室副主任。

从事计算机视觉、机器学习和光谱遥感信息智能感知与系统研发,在视觉目标检测-跟踪分析、高光谱遥感图像处理与智能分析、岩心矿物可视化填图等研发多个实用性系统。

E-mail:xiaoliang@njust.edu.cn

个人主页:

https://www.researchgate.net/profile/Liang_Xiao10





   
全民抗疫我倡议
全民抗疫我倡议



95岁清华物理系教授在线开课公式:

71+1=+∞


线上课堂正流行


耄耋之年的资深教授

慕课当红的青年教师

近在咫尺悉心辅导

随时随地想学就学

校园虽有明亮的教室

家里亦有安静的书桌


网络教学

与其说是疫情带来的挑战

不如说是信息时代的新风尚

感谢时代 感恩老师

没有什么能阻挡知识的传播

少年强 则中国强


图片来源网络


如果您有居家学习的经验要分享,有故事想倾诉,有写作问题想寻求解答,欢迎添加下方学报小编微信,我们在一起。



编辑推荐




本文系《中国图象图形学报》独家稿件

内容仅供学习交流

版权属于原作者

欢迎大家关注转发!


编辑:秀   秀

指导:梧桐君

审校:夏薇薇

总编辑:肖   亮




声  明


欢迎转发本号原创内容,任何形式的媒体或机构未经授权,不得转载和摘编。授权请在后台留言“机构名称+文章标题+转载/转发”联系本号。转载需标注原作者和信息来源为《中国图象图形学报》。本号转载信息旨在传播交流,内容为作者观点,不代表本号立场。未经允许,请勿二次转载。如涉及文字、图片等内容、版权和其他问题,请于文章发出20日内联系本号,我们将第一时间处理。《中国图象图形学报》拥有最终解释权。


齐心抗疫

与你同在

前沿 | 观点 | 资讯 | 独家

电话:010-58887030/7035/7418

网站:www.cjig.cn



在看点这里
登录查看更多
0

相关内容

最新《深度多模态数据分析》综述论文,26页pdf
专知会员服务
294+阅读 · 2020年6月16日
WSDM 2020教程《深度贝叶斯数据挖掘》,附257页PPT下载
专知会员服务
153+阅读 · 2020年2月7日
前深度学习时代CTR预估模型的演化之路
AINLP
7+阅读 · 2019年9月15日
已删除
将门创投
4+阅读 · 2019年8月22日
从数据结构到算法:图网络方法初探
机器之心
7+阅读 · 2019年8月12日
【知识图谱】基于知识图谱的用户画像技术
产业智能官
101+阅读 · 2019年1月9日
【知识图谱】知识图谱怎么与深度学习结合?
产业智能官
159+阅读 · 2018年12月18日
【机器学习】机器学习:未来十年研究热点
产业智能官
16+阅读 · 2018年11月4日
Deep Unrolling:深度网络与传统模型之间的桥梁
极市平台
6+阅读 · 2018年10月10日
【学界】基于生成对抗网络的低秩图像生成方法
GAN生成式对抗网络
9+阅读 · 2018年7月13日
一文读懂图像压缩算法
七月在线实验室
15+阅读 · 2018年5月2日
贝叶斯机器学习前沿进展
无人机
7+阅读 · 2018年1月26日
Arxiv
21+阅读 · 2019年8月21日
Sparse Sequence-to-Sequence Models
Arxiv
5+阅读 · 2019年5月14日
Arxiv
6+阅读 · 2019年4月8日
Arxiv
9+阅读 · 2018年2月4日
VIP会员
相关资讯
前深度学习时代CTR预估模型的演化之路
AINLP
7+阅读 · 2019年9月15日
已删除
将门创投
4+阅读 · 2019年8月22日
从数据结构到算法:图网络方法初探
机器之心
7+阅读 · 2019年8月12日
【知识图谱】基于知识图谱的用户画像技术
产业智能官
101+阅读 · 2019年1月9日
【知识图谱】知识图谱怎么与深度学习结合?
产业智能官
159+阅读 · 2018年12月18日
【机器学习】机器学习:未来十年研究热点
产业智能官
16+阅读 · 2018年11月4日
Deep Unrolling:深度网络与传统模型之间的桥梁
极市平台
6+阅读 · 2018年10月10日
【学界】基于生成对抗网络的低秩图像生成方法
GAN生成式对抗网络
9+阅读 · 2018年7月13日
一文读懂图像压缩算法
七月在线实验室
15+阅读 · 2018年5月2日
贝叶斯机器学习前沿进展
无人机
7+阅读 · 2018年1月26日
相关论文
Top
微信扫码咨询专知VIP会员