近年来,随机矩阵理论(RMT)已经成为学习理论的前沿,作为一种工具来理解它的一些最重要的挑战。从深度学习模型的泛化到优化算法的精确分析,RMT提供了易于分析的模型。

第一部分:介绍和经典随机矩阵理论集合

本节介绍两个经典的随机矩阵理论集合,高斯正交集合和Wishart矩阵。通过数值实验,我们将介绍随机矩阵理论中一些最重要的分布,如半圆和马尔钦科-帕斯图,以及一些关键的概念,如通用性。 图片

第2部分:随机矩阵理论概论:斯蒂尔吉斯和R变换 本节介绍随机矩阵理论中的一些核心证明技术: Stieltjes和R变换。

第3部分:数值算法分析 本节主要介绍随机矩阵理论在数值算法分析中的应用。

第4部分:为什么深度学习有效? 本节讨论深度神经网络泛化的随机矩阵理论模型。

https://random-matrix-learning.github.io/#presentation1

成为VIP会员查看完整内容
114

相关内容

专知会员服务
31+阅读 · 2021年9月23日
《过参数化机器学习理论》综述论文
专知会员服务
45+阅读 · 2021年9月19日
专知会员服务
143+阅读 · 2021年8月12日
专知会员服务
123+阅读 · 2021年8月4日
专知会员服务
81+阅读 · 2021年7月31日
专知会员服务
91+阅读 · 2021年6月11日
最新《非凸优化理论》进展书册,79页pdf
专知会员服务
108+阅读 · 2020年12月18日
【实用书】数据科学基础,484页pdf,Foundations of Data Science
专知会员服务
118+阅读 · 2020年5月28日
【经典书】机器学习高斯过程,266页pdf
专知会员服务
195+阅读 · 2020年5月2日
421页《机器学习数学基础》最新2019版PDF下载
246 页《统计机器学习与凸优化》教程 PPT 下载
新智元
24+阅读 · 2018年9月21日
10本必读的机器学习和数据科学免费在线电子书
算法与数据结构
11+阅读 · 2018年6月19日
如何用张量分解加速深层神经网络?(附代码)
贝叶斯机器学习前沿进展
无人机
7+阅读 · 2018年1月26日
Spark机器学习:矩阵及推荐算法
LibRec智能推荐
16+阅读 · 2017年8月3日
Tighter risk certificates for neural networks
Arxiv
0+阅读 · 2021年9月22日
PKLM: A flexible MCAR test using Classification
Arxiv
0+阅读 · 2021年9月21日
Optimization for deep learning: theory and algorithms
Arxiv
104+阅读 · 2019年12月19日
The Matrix Calculus You Need For Deep Learning
Arxiv
12+阅读 · 2018年7月2日
VIP会员
相关VIP内容
专知会员服务
31+阅读 · 2021年9月23日
《过参数化机器学习理论》综述论文
专知会员服务
45+阅读 · 2021年9月19日
专知会员服务
143+阅读 · 2021年8月12日
专知会员服务
123+阅读 · 2021年8月4日
专知会员服务
81+阅读 · 2021年7月31日
专知会员服务
91+阅读 · 2021年6月11日
最新《非凸优化理论》进展书册,79页pdf
专知会员服务
108+阅读 · 2020年12月18日
【实用书】数据科学基础,484页pdf,Foundations of Data Science
专知会员服务
118+阅读 · 2020年5月28日
【经典书】机器学习高斯过程,266页pdf
专知会员服务
195+阅读 · 2020年5月2日
微信扫码咨询专知VIP会员