项目名称: 机器学习核方法模型选择与组合的核矩阵近似分析方法

项目编号: No.61170019

项目类型: 面上项目

立项/批准年度: 2012

项目学科: 自动化技术、计算机技术

项目作者: 廖士中

作者单位: 天津大学

项目金额: 55万元

中文摘要: 如何避免欠拟合与过拟合,提高泛化性,是机器学习核方法理论研究和实际应用的重要问题,也是核方法模型选择与组合的基本问题。现有核方法研究没有给出机器学习本质意义的且计算高效的模型选择与组合方法,往往采用在核模型构造后利用测试数据或验证数据来优化模型参数的实验方法。本项目研究核方法模型选择与组合的核矩阵近似分析方法。首先,显式地构造稠密且计算高效的再生核希尔伯特空间(RKHS)和核矩阵空间,在此基础上细化积分算子谱与核矩阵谱的对应关系,给出从样本结构和算子-矩阵谱关系反演核矩阵的方法,分析核方法稳定性与核模型泛化性的关系。然后,推导并分析核矩阵近似误差与核方法稳定性的关系,进而定制出核方法模型选择与组合的评价准则。最后,设计核矩阵和评价准则高效的计算算法。该项目探索核矩阵近似计算与核方法泛化性之间的关系,发展核方法的核矩阵近似计算理论,并给出适用于大规模样本的核方法学习方法和评价方法。

中文关键词: 机器学习;核方法;模型选择与组合;逼近论;矩阵近似计算

英文摘要:

英文关键词: machine learning;kernel methods;model selection and combination;approximation theory;matrix approximation

成为VIP会员查看完整内容
0

相关内容

“机器学习是近20多年兴起的一门多领域交叉学科,涉及概率论、统计学、逼近论、凸分析、算法复杂度理论等多门学科。机器学习理论主要是设计和分析一些让 可以自动“ 学习”的算法。机器学习算法是一类从数据中自动分析获得规律,并利用规律对未知数据进行预测的算法。因为学习算法中涉及了大量的统计学理论,机器学习与统计推断学联系尤为密切,也被称为统计学习理论。算法设计方面,机器学习理论关注可以实现的,行之有效的学习算法。很多 推论问题属于 无程序可循难度,所以部分的机器学习研究是开发容易处理的近似算法。” ——中文维基百科

知识荟萃

精品入门和进阶教程、论文和代码整理等

更多

查看相关VIP内容、论文、资讯等
【博士论文】机器学习中的标记增强理论 与应用研究
专知会员服务
27+阅读 · 2021年12月3日
专知会员服务
20+阅读 · 2021年9月23日
专知会员服务
137+阅读 · 2021年8月12日
专知会员服务
75+阅读 · 2021年7月31日
专知会员服务
113+阅读 · 2021年7月24日
基于机器学习的数据库技术综述
专知会员服务
53+阅读 · 2021年1月2日
【经典书】机器学习高斯过程,266页pdf
专知会员服务
192+阅读 · 2020年5月2日
AAAI21 | 基于块(Block)建模理论图神经网络
图与推荐
0+阅读 · 2021年12月28日
输入梯度惩罚与参数梯度惩罚的一个不等式
PaperWeekly
0+阅读 · 2021年12月27日
一文读懂线性回归、岭回归和Lasso回归
CSDN
33+阅读 · 2019年10月13日
机器学习计算距离和相似度的方法
极市平台
10+阅读 · 2019年9月20日
【机器学习】深入剖析机器学习中的统计思想
产业智能官
14+阅读 · 2019年1月24日
机器学习(32)之典型相关性分析(CCA)详解 【文末有福利......】
机器学习算法与Python学习
12+阅读 · 2017年12月16日
机器学习(30)之线性判别分析(LDA)原理详解
机器学习算法与Python学习
11+阅读 · 2017年12月6日
机器学习(23)之GBDT详解
机器学习算法与Python学习
12+阅读 · 2017年10月25日
国家自然科学基金
14+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
2+阅读 · 2012年12月31日
国家自然科学基金
3+阅读 · 2012年12月31日
国家自然科学基金
3+阅读 · 2011年12月31日
国家自然科学基金
1+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
1+阅读 · 2008年12月31日
国家自然科学基金
0+阅读 · 2008年12月31日
Arxiv
0+阅读 · 2022年5月9日
Disentangled Information Bottleneck
Arxiv
12+阅读 · 2020年12月22日
小贴士
相关VIP内容
【博士论文】机器学习中的标记增强理论 与应用研究
专知会员服务
27+阅读 · 2021年12月3日
专知会员服务
20+阅读 · 2021年9月23日
专知会员服务
137+阅读 · 2021年8月12日
专知会员服务
75+阅读 · 2021年7月31日
专知会员服务
113+阅读 · 2021年7月24日
基于机器学习的数据库技术综述
专知会员服务
53+阅读 · 2021年1月2日
【经典书】机器学习高斯过程,266页pdf
专知会员服务
192+阅读 · 2020年5月2日
相关资讯
AAAI21 | 基于块(Block)建模理论图神经网络
图与推荐
0+阅读 · 2021年12月28日
输入梯度惩罚与参数梯度惩罚的一个不等式
PaperWeekly
0+阅读 · 2021年12月27日
一文读懂线性回归、岭回归和Lasso回归
CSDN
33+阅读 · 2019年10月13日
机器学习计算距离和相似度的方法
极市平台
10+阅读 · 2019年9月20日
【机器学习】深入剖析机器学习中的统计思想
产业智能官
14+阅读 · 2019年1月24日
机器学习(32)之典型相关性分析(CCA)详解 【文末有福利......】
机器学习算法与Python学习
12+阅读 · 2017年12月16日
机器学习(30)之线性判别分析(LDA)原理详解
机器学习算法与Python学习
11+阅读 · 2017年12月6日
机器学习(23)之GBDT详解
机器学习算法与Python学习
12+阅读 · 2017年10月25日
相关基金
国家自然科学基金
14+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
2+阅读 · 2012年12月31日
国家自然科学基金
3+阅读 · 2012年12月31日
国家自然科学基金
3+阅读 · 2011年12月31日
国家自然科学基金
1+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
1+阅读 · 2008年12月31日
国家自然科学基金
0+阅读 · 2008年12月31日
微信扫码咨询专知VIP会员