题精解，主要内容包括梯度法和共轭梯度法、无约束最优化问题的直接方法、单纯形替换法、约束极值问题的最优

一、与线性方程组等价的变分问题 二、最速下降法 三、共轭梯度法(共轭斜量法) 四、预条件共轭梯度法

梯度法和共轭梯度法 1.无约束最优化问题 2.梯度法 3.共轭梯度法

基于对Logistic映射混沌变量概率分布的研究,提出了一种区间套混沌搜索方法,避免了混沌搜索的盲目性.将区间套混饨搜索方法与共轭梯度法结合,提出了一种混合优化方法,利用区间套混沌搜索方法搜索到近似最优点,再用共轭梯度法求得最优点.数值计算结果表明,该方法可显著提高优化效率

（1)依赖于初始条件。 （2)与求解空间有紧密关系,促使较快地收敛到局部解,但同时对解域有约束,如可微或连续。利用这些约束,收敛快。 （3)有些方法,如 Davison-Fletcher-Powell--直接依赖于至少一阶导数;共轭梯度法隐含地依赖于梯度

《数值最优化方法》课程教学课件（讲稿，打印版）共轭梯度法