动态规划的理论知识

概念

动态规划的过程：每个决策依赖于当前状态，有随机一起状态转移。一个决策系列就是在变化的状态中产生出来的，所以这种多阶段最优化决策解决问题的过程就称为动态规划。

基本思想和策略

基本思想与分治法相似，也是将待求问题分解为若干子问题（阶段），按顺序求解子问题，前一个子问题的解，为后一个子问题的求解提供了有用的信息；在求解任一子问题时，列出所有可能的局部解，通过决策保留那些可能达到最优的局部解，丢弃其他局部解。依次解决各子问题，最后一个子问题就是初始问题的解。

与分治法最大的差别是：适合用于动态规划求解的问题，经分解后得到的子问题往往不是独立的。（下一阶段的解是建立在上一阶段的基础上，进行进一步的求解）；

适用情况。

能适合动态规划求解的问题一般具有三个性质：

最优化原理 ：如果问题的最优解所包含的子问题的解也是最优解，就称为该问题具有最优子结构，即满足最优化原理。

无后效性：某个阶段状态一旦确定，就不受这个状态以后的阶段影响。

有重叠子问题：子问题间不是互相独立的，一个子问题在下一阶段可能多次被用到；（该条件不是必要条件）

求解过程

1 划分阶段：按照问题的时间和空间特征，把问题分为若干阶段，再划分阶段时，划分后的阶段一定是有序的或者是可排序的；否者问题无法求解。

2 确定状态和状态变量：将问题发展到各个阶段时所处于的各种客观情况用不同的状态表示出来。状态的选择要满足无后效性；

3 确定决策并写出状态转移方程：因为决策和状态有天然的联系，所以如果确定了决策状态转移方程也就可写出(状态转移就是根据上一阶段的决策和状态导出本阶段的状态)常常通过递归去找状态转移方程。

4 寻找边界条件：给出一个递推关系式，需要一个终止条件和边界条件；

动态规划的分类：线性动归，区域动归，树形动归，背包动归；

线性动规：拦截导弹，合唱队形，挖地雷，建学校，剑客决斗等

区域动规：石子合并， 加分二叉树，统计单词个数，炮兵布阵等

树形动规：贪吃的九头龙，二分查找树，聚会的欢乐，数字三角形等

背包问题：01背包问题，完全背包问题，分组背包问题，二维背包，装箱问题，挤牛奶（同济ACM第1132题）等