【ICML2021】低秩Sinkhorn 分解

2021 年 8 月 20 日 专知


最近最优传输(OT)理论在机器学习中的几个应用都依赖于正则化,尤其是熵和Sinkhorn算法。由于矩阵向量乘积在Sinkhorn算法中是普遍存在的,一些工作已经提出使用低秩因子来近似其迭代中出现的核矩阵。另一种方法是在OT问题中考虑的可行耦合集上施加低非负秩约束,不需要对代价或核矩阵进行逼近。这条路线首先由forrow2018探索,他提出了一种为平方欧氏地面成本量身定制的算法,使用了一个代理目标,可以通过正则化的Wasserstein重心机制来解决。在此基础上,我们引入了一种通用方法,旨在完全通用性地解决具有任意代价的低非负秩约束下的OT问题。我们的算法依赖于低秩耦合的显式分解,将其作为由公共边际连接的子耦合因子的乘积; 与NMF方法类似,我们交替更新这些因素。证明了该算法的非渐近平稳收敛性,并通过基准实验证明了该算法的有效性。


https://www.zhuanzhi.ai/paper/9f498d13bd99855dfac185ee9d905999



专知便捷查看

便捷下载,请关注专知公众号(点击上方蓝色专知关注)

  • 后台回复“LRSF” 就可以获取【ICML2021】低秩Sinkhorn 分解》专知下载链接

专知,专业可信的人工智能知识分发,让认知协作更快更好!欢迎注册登录专知www.zhuanzhi.ai,获取5000+AI主题干货知识资料! 合作bd@zhuanzhi.ai


欢迎微信扫一扫加入专知人工智能知识星球群,获取最新AI专业干货知识教程资料和与专家交流咨询
点击“ 阅读原文 ”,了解使用 专知 ,查看获取5000+AI主题知识资源
登录查看更多
9

相关内容

专知会员服务
20+阅读 · 2021年9月23日
专知会员服务
25+阅读 · 2021年9月9日
专知会员服务
28+阅读 · 2021年7月19日
专知会员服务
36+阅读 · 2021年7月17日
专知会员服务
42+阅读 · 2021年7月1日
专知会员服务
21+阅读 · 2021年6月26日
专知会员服务
23+阅读 · 2021年6月8日
专知会员服务
35+阅读 · 2021年6月3日
专知会员服务
28+阅读 · 2021年5月21日
专知会员服务
80+阅读 · 2021年5月10日
【ICML2021】因果匹配领域泛化
专知
10+阅读 · 2021年8月12日
【CVPR2021】跨模态检索的概率嵌入
专知
17+阅读 · 2021年3月2日
图神经网络架构,稳定性,可迁移性
专知
5+阅读 · 2020年8月8日
【ICML 2020 】小样本学习即领域迁移
专知
5+阅读 · 2020年6月26日
注意力图神经网络的多标签文本分类
专知
8+阅读 · 2020年3月28日
Arxiv
0+阅读 · 2021年10月8日
Arxiv
0+阅读 · 2021年7月7日
Arxiv
6+阅读 · 2020年3月16日
Arxiv
3+阅读 · 2018年12月3日
Arxiv
23+阅读 · 2018年10月24日
Arxiv
11+阅读 · 2018年1月18日
VIP会员
相关VIP内容
专知会员服务
20+阅读 · 2021年9月23日
专知会员服务
25+阅读 · 2021年9月9日
专知会员服务
28+阅读 · 2021年7月19日
专知会员服务
36+阅读 · 2021年7月17日
专知会员服务
42+阅读 · 2021年7月1日
专知会员服务
21+阅读 · 2021年6月26日
专知会员服务
23+阅读 · 2021年6月8日
专知会员服务
35+阅读 · 2021年6月3日
专知会员服务
28+阅读 · 2021年5月21日
专知会员服务
80+阅读 · 2021年5月10日
相关资讯
【ICML2021】因果匹配领域泛化
专知
10+阅读 · 2021年8月12日
【CVPR2021】跨模态检索的概率嵌入
专知
17+阅读 · 2021年3月2日
图神经网络架构,稳定性,可迁移性
专知
5+阅读 · 2020年8月8日
【ICML 2020 】小样本学习即领域迁移
专知
5+阅读 · 2020年6月26日
注意力图神经网络的多标签文本分类
专知
8+阅读 · 2020年3月28日
相关论文
Arxiv
0+阅读 · 2021年10月8日
Arxiv
0+阅读 · 2021年7月7日
Arxiv
6+阅读 · 2020年3月16日
Arxiv
3+阅读 · 2018年12月3日
Arxiv
23+阅读 · 2018年10月24日
Arxiv
11+阅读 · 2018年1月18日
Top
微信扫码咨询专知VIP会员