说明:介绍了基本优化方法,比如基本的牛顿法,拟牛顿法,以及相关的约束最优化方法如拉格朗日乘子法等。
说明:马昌凤-最优化计算方法及其MATLAB程序实现全文PDF,另外有文中程序,仅供学友们交流最优化。
说明:共轭梯度法(Conjugate Gradient)是介于最速下降法与牛顿法之间的一个方法,它仅需利用一阶导数信息,但克服了最速下降法收敛慢的缺点,又避免了牛顿法需要存储和计算Hesse矩阵并求逆的缺点,共轭梯度法不仅是解决大型线性方程组最有用的方法之一,也是解大型非线性最优化最有效的算法之一。 在各...