无约束优化

一、一维搜索方法

重要性质：

1.试探法

（1）确定初始搜索区间：

进退法：

（2）区间收缩法：

黄金分割法：

其余方法：二分法， 斐波那契法

2.插值法

1.牛顿法

2.抛物线法

三点二次插值法：

两点二次插值法： 更改x求法

二、不精确一维搜索方法

1.Goldstein 准则

2.Wolfe准则

三、无约束优化方法

1.最速下降法

2.牛顿法

阻尼牛顿法：

3.拟牛顿法

DFP算法：

BFGS算法：校正项H修改为B

4.共轭梯度法

FR共轭梯度法将β进行修改

四、信赖域方法（待补充）