【算法】动态规划

流浪猪头拯救地球

已于 2022-12-29 20:26:18 修改

阅读量648

点赞数 1

分类专栏： Algorithm 文章标签：算法动态规划 leetcode

于 2022-12-29 20:10:07 首次发布

本文链接：https://blog.csdn.net/Gou_Hailong/article/details/127851294

版权

Algorithm 专栏收录该内容

4 篇文章 0 订阅

订阅专栏

文章目录

Part.I Introduction
- Chap.I Reference
- Chap.II 基础概念
Part.II 动态规划的思想
Part.III 具体实例

Part.I Introduction

刷题的时候一碰到动态规划的问题就头大，总觉得这类问题很复杂，给我一种不确定性，虚无缥缈，抓不住踩不实的感觉。于是在学习的过程中记了点笔记，后期整理才有了这篇博文。
因为并不是一气呵成的，时间跨度也比较大，所以文章的逻辑并不是很严密。

Chap.I Reference

Chap.II 基础概念

动态规划是由 Dynamic Programming (简称 DP) 翻译过来的。动态规划的概念是由美国数学家R.E.Bellman等人提出的，应用于工程领域。

dynamic programming is a method for solving a complex problem by breaking it down into a collection of simpler subproblems.

下面是一些概念：

动态规划是求解多阶段决策过程(decision process)的最优化问题一种方法。所谓多阶段决策过程是指这样一类决策过程：它可以把一个复杂问题按时间(或空间)分成若干个阶段，每个阶段都需要作出决策，以便得到过程的最优结果。由于在每阶段采取的决策是与时间有关的而且前一阶段采取的决策如何，不但与该阶段的经济效果有关，还影响以后各阶段的经济效果，可见这类多阶段决策问题是一个动态的问题，因此，处理的方法称为动态规划方法。然而，动态规划也可以处理一些本来与时间没有关系的静态模型，这只要在静态模型中人为地引入『时间』因素，分成时段，就可以把它看作是多阶段的动态模型，用动态规划方法去处理。
简言之，多阶段决策过程是指这样的一类特殊的活动过程：问题可以按时间顺序分解成若干相互联系的阶段，在每一个阶段都要做出决策，全部过程的决策是一个决策序列。
无后效性(without aftereffect)：无后效性是指如果在某个阶段上过程的状态已知，则从此阶段以后过程的发展变化仅与此阶段的状态有关，而与过程在此阶段以前的阶段所经历过的状态无关。利用动态规划方法求解多阶段决策过程问题，过程的状态必须具备无后效性（突然想到了马尔可夫性）。
NP 完全问题 (Non-deterministic Polynomial Complete, NP-C 问题)：即多项式复杂程度的非确定性问题。简单的写法是 NP=P？，问题就在这个问号上，到底是NP等于P，还是NP不等于P。想要彻底了解这个名词的含义首先需要知道下面的几个名词。
P类问题 (polynomial)：所有可以在多项式时间内求解的判定问题构成 P 类问题。
判定问题：判断是否有一种能够解决某一类问题的能行算法的研究课题。
NP类问题 (Non-deterministic Polynomial)：所有的非确定性多项式时间可解的判定问题构成 NP 类问题。
非确定性算法：非确定性算法将问题分解成猜测和验证两个阶段。算法的猜测阶段是非确定性的，算法的验证阶段是确定性的，它验证猜测阶段给出解的正确性。
NPC问题：NP 中的某些问题的复杂性与整个类的复杂性相关联。这些问题中任何一个如果存在多项式时间的算法，那么所有NP 问题都是多项式时间可解的。这些问题被称为NP-完全问题(NPC问题)。

Part.II 动态规划的思想

动态规划和分治法类似，其基本思想也是将待求解问题分解成若干个子问题，先求解子问题，然后从这些子问题的解得到原问题的解。与分治法不同的是，动态规划法中分解得到的子问题不是互相独立的。若用分治法来解这类子问题，分解得到的子问题数目非常多，最后解决原问题需要耗费指数时间。

动态规划的核心思想：拆分子问题，记住过往，减少重复计算。

或者说，确定合适的状态，找出状态转移方程，自底而上地去『转移』。

状态：靠猜；状态转移要做到『不漏』或『不重不漏』，它可以用来检验状态的选取是否合适。

Chap.I 求解步骤

动态规划的求解步骤：

找出最优解的性质，并刻划其结构特征（确定状态量，一般靠经验）。
递归地定义最优值（构造状态转移方程）。
利用状态转移方程，自底而上计算出最优值，需要注意的是初值和特殊情况下的状态转移方程（根据题目需求，状态转移要做到『不漏』或『不重不漏』）。
根据计算最优值时得到的信息，构造最优解。

Chap.II 动态规划的一些属性

动态规划算法的基本要素：最优子结构、重叠子问题、状态转移方程。
最优子结构

矩阵连乘计算次序问题的最优解包含着其子问题的最优解。这种性质称为最优子结构性质。
在分析问题的最优子结构性质时，所用的方法具有普遍性：首先假设由问题的最优解导出的子问题的解不是最优的，然后再设法说明在这个假设下可构造出比原问题最优解更好的解，从而导致矛盾。
利用问题的最优子结构性质，以自底向上的方式递归地从子问题的最优解逐步构造出整个问题的最优解。最优子结构是问题能用动态规划算法求解的前提。
注意：同一个问题可以有多种方式刻划它的最优子结构，有些表示方法的求解速度更快（空间占用小，问题的维度低）

重叠子问题