最速下降法又称为梯度法,是1847 年由著名数学家Cauchy 给出的,它是解析法中最古老的一种,其他解析方法或是它的变形,或是受它的启发而得到的,因此它是最优化方法的基础。作为一种基本的算法,他在最优化方法中占有重要地位。其优点是工作量少,存储变量较少,初始点要求不高;缺点是收敛慢,效率不高,有时达不到最优解。非线性规划研究的对象是非线性函数的数值最优化问题。它的理论和方法渗透到许多方面,特别是在军事、经济、管理、生产过程自动化、工程设计和产品优化设计等方面都有着重要的应用。而最速下降法正是n元函数的无约束非线性规划问题min f (x)的一种重要解析法,研究最速下降法原理及其算法实现对我们有着极其重要的意义
今日面试题分享:什么是拟牛顿法(Quasi-Newton Methods)?
七月在线实验室
0+阅读 · 2019年3月4日
今日面试题分享:说说共轭梯度法?
七月在线实验室
1+阅读 · 2019年3月6日
BAT机器学习面试题1000题(341~345题)
七月在线实验室
2+阅读 · 2018年8月16日
Google AI 普林斯顿:当前和未来的研究
谷歌开发者
0+阅读 · 2019年1月8日
今日面试题分享:说说梯度下降法
七月在线实验室
3+阅读 · 2019年2月26日
【BAT机器学习面试题】前100题汇总及勘误(下)
七月在线实验室
2+阅读 · 2017年10月18日
【BAT机器学习面试题】前100题汇总及勘误(下)
深度学习世界
0+阅读 · 2017年12月28日
参考链接
微信扫码咨询专知VIP会员