国科大-林姝-算法中的最优化方法2022期末复习整理+试卷

一、迭代终止条件
1.椭球法 终止条件:
在这里插入图片描述
Xk为当前迭代点,x*是优化问题的最优解,f是目标函数
2.multi-start Levenberg-Marquardt终止条件:
在这里插入图片描述

3.multi-start sequential quadratic programming
存在在这里插入图片描述
在这里插入图片描述

4.单纯形法能在有限步内找到最优解,因此没有停止条件
5.multi-start Gauss-Newton least-squares algorithm无约束最小非线性二乘问题在这里插入图片描述

,优化问题的形式为在这里插入图片描述

e代表错误函数
6.multi-start penalty function method + line search method with Powell directions and line minimization using parabolic interpolation 在这里插入图片描述

7.multi-start Lagrange method + Levenberg-Marquardt algorithm在这里插入图片描述
h is the equality constraint function (when the constraint is written in the form h(x) = 0), andε1, ε2 are small positive numbers. where f and h are respectively the objective function and the equality constraint function of the original constrained problem (with the equality constraint written in the form h(x= 0)
8.改进单纯形法能在有限步找到最优解
a multi-start penalty function method with the Nelder-Mead algorithm (M7)
在这里插入图片描述

10.切平面法终止条件
在这里插入图片描述

11.interior point algorithm
在这里插入图片描述

二、判断凸函数:
(1)凸函数之和为凸函数
在这里插入图片描述

(2)存在非凸函数的函数之和就是非凸函数
在这里插入图片描述

(3)仿射函数的凸函数是凸函数
-log(x)是凸函数,在这里插入图片描述
是凸函数,在这里插入图片描述
是凸函数
(4)在这里插入图片描述
是凸函数
三、非凸函数使用multi-start method:multi-start Levenberg-Marquardt
multi-start sequential quadratic programming
multi-start Gauss-Newton least-squares algorithm

两个函数相加,凸函数的这个公式取小于等于号,线性函数的这个公式取等号
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

在这里插入图片描述

  • 2
    点赞
  • 12
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
教学目的要求 最优化方法属于专业普及课程,是从所有可能方案选择最合理的方案以达到最优目标的学科,是随着计算机的普遍应用而发展起来的,它已广泛应用于各个领域。随着最优化方法理论的完善及计算机技术各种算法的发展,最优化方法也广泛被应用于计算机算法的设计和优化。本门课程旨在讲授最优化的基本理论和方法,要求通过本课程的学习,具有应用最优化方法解决一些实际问题的初步技能,并为以后的学习和工作做必要的准备。 本课程的任务是讨论求解线性规划、无约束非线性规划、约束非线性规划、多目标规划、整数规划的基本原理与一般方法,并学习MATLAB等工具软件的应用,使学生掌握最优化方法的基本概念、基本原理和基本方法,初步学会应用最优化方法解决简单的实际优化问题,培养解决实际问题的能力。 预修课程 微积分、线性代数 教材 教材: 《最优化理论与方法》,作者袁亚湘、孙文瑜,科学出版社,1997; 课程资料。 主要内容 第一章 最优化方法的由来及其基本原理 . 最优化方法的产生与发展,最优化方法的基本原理 第二章 线性规划 .线性规划问题,单纯形法 第三章 二次规划 . 二次规划算法及应用 第四章 无约束非线性规划 . 牛顿、拟牛顿方法,下降方向及线性搜索 第五章 有约束非线性规划 . 有约束非线性规划算法,等式约束和不等式约束的处理 第六章 凸优化 . 凸问题,凸约束,凸优化算法及实例 第七章 全局优化 . 局部与全局最优解,多起始点、模拟退火、遗传算法 第八章 MATLAB优化工具箱 . MATLAB优化工具软件的使用 第九章 多目标优化 . Pareto最优性,多目标优化算法 第十章 整数规划 . 混合整数规划算法概述,整数规划复杂性,搜索 第十一章 最优化方法在计算机算法的应用 . 最优化方法在机器学习等领域的应用。 基本要求: 1、掌握最优化方法的基本概念、相关的优化原理和最常用的算法,注意方法处理的技巧及其与计算机的结合,提高计算机应用能力; 2、通过例子,学习使用各种优化方法解决实际遇到的简单优化问题,提高分析、解决实际问题的能力; 参考文献 主要参考书: 《最优化理论与方法》,作者陈宝,清华大学出版社,1989; Nonlinear Programming (Second Edition),Dimitri P. Bertsekas, Athena Scientific Belmont, 1999.
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值