项目名称: 一类具有光滑结构的非光滑随机优化的分解方法

项目编号: No.11301347

项目类型: 青年科学基金项目

立项/批准年度: 2014

项目学科: 数理科学和化学

项目作者: 陆媛

作者单位: 沈阳大学

项目金额: 22万元

中文摘要: 很多科学技术领域中都存在着具有光滑结构的非光滑随机优化问题,例如鲁棒控制中的极大极小随机优化,随机矩阵最大特征值函数优化和土木工程领域中的随机半无限规划等。本项目将研究上述三种具有光滑结构的非光滑随机优化的样本均值分解方法。主要研究内容包括:三种非光滑随机优化的光滑结构与光滑性质;SAA子问题精确求解时样本均值分解方法的概率1意义下的收敛性与收敛速度,以及概率的指数收敛率;建立SAA子问题非精确求解的准则,证明在此非精确准则下的样本均值分解方法的概率1意义下的收敛性与收敛速度,以及概率的指数收敛率;以MATLAB语言为工具,编制三种非光滑随机优化的具体有效的算法程序。期望项目的研究可对随机优化的发展起积极促进作用。

中文关键词: 随机优化;分解方法;SAA方法;束方法;

英文摘要: Nonsmooth optimization problems with smooth substructures arise in many field of Science and Technology, such as minimax stochastic optimization in robust control, optimization problem of maximum eigenvalue function of stochastic matrix and stochastic semi-infinite programming in the field of civil engineering. The project focuses on the sample average approximation decomposition method for the three nonsmooth stochastic optimizations which have smooth structures. The main research contents are as follows. Firstly, the convergence and the convergence rate with probability 1,and the exponential convergence rate of probability for the sample average approximation decomposition method as the SAA subproblem is solved exactly, are presented. Secondly, the criterion is established for the SAA subproblem being solved inexactly, and then the convergence and the convergence rate with probability 1, and the exponential convergence rate of probability for the sample average approximation decomposition method under the inexact criterion, are proved. Lastly, the effective procedure for the concrete algorithms are programmed by Matlab language. The anticipated results will play an active promoting role for the development of stochastic optimization.

英文关键词: stochastic optimization;decomposition theory;SAA method;bundle method;

成为VIP会员查看完整内容
0

相关内容

NeurIPS 2021 | 用简单的梯度下降算法逃离鞍点
专知会员服务
23+阅读 · 2021年12月6日
【博士论文】基于冲量的加速优化算法
专知会员服务
25+阅读 · 2021年11月29日
逆优化: 理论与应用
专知会员服务
36+阅读 · 2021年9月13日
专知会员服务
38+阅读 · 2021年8月20日
【开放书】《矩阵流形优化算法》,241页pdf
专知会员服务
93+阅读 · 2021年7月3日
专知会员服务
73+阅读 · 2020年12月7日
专知会员服务
200+阅读 · 2020年9月1日
专知会员服务
42+阅读 · 2020年7月29日
梯度下降(Gradient Descent)的收敛性分析
PaperWeekly
2+阅读 · 2022年3月10日
【博士论文】基于冲量的加速优化算法
专知
7+阅读 · 2021年11月29日
用狄拉克函数来构造非光滑函数的光滑近似
PaperWeekly
0+阅读 · 2021年10月23日
【ICML2021】低秩Sinkhorn 分解
专知
9+阅读 · 2021年8月20日
求解稀疏优化问题——半光滑牛顿方法
极市平台
45+阅读 · 2019年11月30日
【优博微展2019】李志泽:简单快速的机器学习优化方法
清华大学研究生教育
14+阅读 · 2019年10月8日
基于数据的分布式鲁棒优化算法及其应用【附PPT与视频资料】
人工智能前沿讲习班
26+阅读 · 2018年12月13日
国家自然科学基金
6+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
Arxiv
15+阅读 · 2021年2月19日
Memory-Gated Recurrent Networks
Arxiv
12+阅读 · 2020年12月24日
Deformable Style Transfer
Arxiv
14+阅读 · 2020年3月24日
Self-Attention Graph Pooling
Arxiv
13+阅读 · 2019年6月13日
小贴士
相关主题
相关VIP内容
NeurIPS 2021 | 用简单的梯度下降算法逃离鞍点
专知会员服务
23+阅读 · 2021年12月6日
【博士论文】基于冲量的加速优化算法
专知会员服务
25+阅读 · 2021年11月29日
逆优化: 理论与应用
专知会员服务
36+阅读 · 2021年9月13日
专知会员服务
38+阅读 · 2021年8月20日
【开放书】《矩阵流形优化算法》,241页pdf
专知会员服务
93+阅读 · 2021年7月3日
专知会员服务
73+阅读 · 2020年12月7日
专知会员服务
200+阅读 · 2020年9月1日
专知会员服务
42+阅读 · 2020年7月29日
相关资讯
梯度下降(Gradient Descent)的收敛性分析
PaperWeekly
2+阅读 · 2022年3月10日
【博士论文】基于冲量的加速优化算法
专知
7+阅读 · 2021年11月29日
用狄拉克函数来构造非光滑函数的光滑近似
PaperWeekly
0+阅读 · 2021年10月23日
【ICML2021】低秩Sinkhorn 分解
专知
9+阅读 · 2021年8月20日
求解稀疏优化问题——半光滑牛顿方法
极市平台
45+阅读 · 2019年11月30日
【优博微展2019】李志泽:简单快速的机器学习优化方法
清华大学研究生教育
14+阅读 · 2019年10月8日
基于数据的分布式鲁棒优化算法及其应用【附PPT与视频资料】
人工智能前沿讲习班
26+阅读 · 2018年12月13日
相关基金
国家自然科学基金
6+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
微信扫码咨询专知VIP会员