说明:共轭梯度法(Conjugate Gradient)是介于最速下降法与牛顿法之间的一个方法,它仅需利用一阶导数信息,但克服了最速下降法收敛慢的缺点,又避免了牛顿法需要存储和计算Hesse矩阵并求逆的缺点,共轭梯度法不仅是解决大型线性方程组最有用的方法之一,也是解大型非线性最优化最有效的算法之一。 在各...
说明:采用随机梯度下降和牛顿法优化无约束优化问题,优化方法作业。运行demo,其中有说明。
说明:应用背景这是一本很不错的,关于最优化方法的程序,里面包含应用较多的几种方法的现成程序,其中包括线性搜索、最速下降法和牛顿法、共轭梯度法、拟牛顿法、信赖域方法、非线性最小二乘问题、罚函数法等等。关键技术里面包含现在应用较多的几种方法的源程序,对初学者有很大的帮助。希望对有需要的同学有所帮助,里面也含有...
说明:Sobel算子边缘增强算法,利用梯度下降原理边缘化图象
说明:BP神经网络的仿真,能够拟合各种函数,支持梯度下降法和LM两种训练算法。所有代码自己编写,没有使用matlab自带的函数,是学习的最佳范本。