算法学习之动态规划（一）动态规划入门

动态规划一直不敢碰 这次决定死磕了
学不会就学不会 哈哈

什么是动态规划

• 动态规划(dynamic programming)是运筹学的一个分支，是求解决策过程(decision process)最优化的数学方法。
  20世纪50年代初美国数学家R.E.Bellman等人在研究多阶段决策过程(multistep decision
  process)的优化问题时，提出了著名的最优化原理(principle of
  optimality)，把多阶段过程转化为一系列单阶段问题，逐个求解，创立了解决这类过程优化问题的新方法——动态规划。1957年出版了他的名著Dynamic
  Programming，这是该领域的第一本著作。

应用：
动态规划问世以来，在经济管理、生产调度、工程技术和最优控制等方面得到了广泛的应用。例如最短路线、库存管理、资源分配、设备更新、排序、装载等问题，用动态规划方法比用其它方法求解更为方便。

基本模型

多阶段决策过程的最优化问题：


如果一类活动过程可以分为若干个互相联系的阶段，在每一个阶段都需作出决策(采取措施)，一个阶段的决策确定以后，常常影响到下一个阶段的决策，从而就完全确定了一个过程的活动路线，则称它为多阶段决策问题。
.

动态规划的解题要领

重要要明确

• 阶段
• 状态
• 无后效性
  ：我们要求状态具有下面的性质：如果给定某一阶段的状态，则在这一阶段以后过程的发展不受这阶段以前各段状态的影响，所有各阶段都确定时，整个过程也就确定了。换句话说，过程的每一次实现可以用一个状态序列表示，在前面的例子中每阶段的状态是该线路的始点，确定了这些点的序列，整个线路也就完全确定。从某一阶段以后的线路开始，当这段的始点给定时，不受以前线路（所通过的点）的影响。状态的这个性质意味着过程的历史只能通过当前的状态去影响它的未来的发展，这个性质称为无后效性。
• 策略
  ：由每个阶段的决策组成的序列称为策略。对于每一个实际的多阶段决策过程，可供选取的策略有一定的范围限制，这个范围称为允许策略集合。允许策略集合中达到最优效果的策略称为最优策略。
• 状态转移方程
  ：给定k阶段状态变量x(k)的值后，如果这一阶段的决策变量一经确定，第k+1阶段的状态变量x(k+1)也就完全确定，即x(k+1)的值随x(k)和第k阶段的决策u(k)的值变化而变化，那么可以把这一关系看成(x(k)，u(k))与x(k+1)确定的对应关系，用x(k+1)=Tk(x(k),u(k))表示。这是从k阶段到k+1阶段的状态转移规律，称为状态转移方程。
• 最优性原理:
  作为整个过程的最优策略，它满足：相对前面决策所形成的状态而言，余下的子策略必然构成“最优子策略”。

动态规划的定义：
动态规划的基本思想是
把待求解的问题分解成若干个子问题，
先求解子问题，然后再从这些子问题的解得到原问题的解，
其中用动态规划分解得到的子问题往往不是互相独立的。

动态规划在查找有很多重叠子问题的情况的最优解时有效。它将问题重新组合成子问题。为了避免多次解决这些子问题，它们的结果都逐渐被计算并被保存，从简单的问题直到整个问题都被解决。因此，动态规划保存递归时的结果，因而不会在解决同样的问题时花费时间。

动态规划只能应用于有最优子结构的问题。

最优子结构的意思是局部最优解能决定全局最优解(对有些问题这个要求并不能完全满足，故有时需要引入一定的近似)。简单地说，问题能够分解成子问题来解决。

求解步骤如下：
1. 找出最优解的性质，并刻画其结构特征；
2. 递归地定义最优值；
3. 以自底向上的方式计算出最优值；
4. 根据计算最优值时得到的信息，构造最优解。

动态规划类题目有两个特点：一是问题包含最优子结构；二是子状态可以重复取到。和搜索一样，是计算机擅长而人不擅长的处理问题的方式。所以一开始理解起来确实多有不便。

动态规划的要素有二：一是状态方式的选取；二是状态转移方程或转化公式

动规解题的一般思路

1. 将原问题分解为子问题把原问题分解为若干个子问题
子问题和原问题形式相同或类似，只不过规模变小了。子问题都解决，原问题即解决(数字三角形例）。
子问题的解一旦求出就会被保存，所以每个子问题只需求 解一次。
2. 确定状态
3. 确定一些初始状态（边界状态）的值
4. 确定状态转移方程  也就是递推公式

特征：
重叠子问题
子问题最优结构
无后效性

动态规划的几种分类

分为一维、二维、区间、树形

一.简单基础dp
这类dp主要是一些状态比较容易表示，转移方程比较好想，问题比较基本常见的。主要包括递推、背包、LIS（最长递增序列），LCS（最长公共子序列）
1、递推：
递推一般形式比较单一，从前往后，分类枚举就行。

简单:
hdu 2084 数塔 简单从上往下递推
hdu 2018 母牛的故事 简单递推计数
hdu 2044 一只小蜜蜂... 简单递推计数（Fibonacci）
hdu 2041 超级楼梯 Fibonacci
hdu 2050 折线分割平面 找递推公式
推荐：
CF 429B B.Working out 四个角递推
zoj 3747 Attack on Titans 带限制条件的计数递推dp
uva 10328 Coin Toss 同上题
hdu 4747 Mex 
hdu 4489 The King's Ups and Downs
hdu 4054 Number String

2、背包
经典的背包九讲：http://love-oriented.com/pack/
推荐博客：http://blog.csdn.net/woshi250hua/article/details/7636866
主要有0-1背包、完全背包、分组背包、多重背包。

简单：
hdu 2955 Robberies 01背包
hdu 1864 最大报销额 01背包
hdu 2602 Bone Collector 01背包
hdu 2844 Coins 多重背包
hdu 2159 FATE 完全背包
推荐：
woj 1537 A Stone-I  转化成背包
woj 1538 B Stone-II 转化成背包
poj 1170 Shopping Offers 状压+背包
zoj 3769 Diablo III 带限制条件的背包
zoj 3638 Fruit Ninja 背包的转化成组合数学
hdu 3092 Least common multiple 转化成完全背包问题
poj 1015 Jury Compromise 扩大区间+输出路径

3、LIS
最长递增子序列，朴素的是o(n^2)算法，二分下可以写成o(nlgn)：维护一个当前最优的递增序列——找到恰好大于它更新

简单：
hdu 1003 Max Sum
hdu 1087 Super Jumping!
推荐：
uva 10635 Prince and Princess LCS转化成LIS
hdu 4352 XHXJ's LIS　数位dp+LIS思想
srm div2 1000  状态压缩+LIS
poj 1239 Increasing Sequence 两次dp

4、LCS
最长公共子序列，通常o(n^2)的算法

hdu 1503 Advanced Fruits
hdu 1159 Common Subsequence
uva 111 History Grading 要先排个序
poj 1080 Human Gene Functions

二、区间dp
推荐博客：http://blog.csdn.net/woshi250hua/article/details/7969225
区间dp,一般是枚举区间，把区间分成左右两部分，然后求出左右区间再合并。

poj 1141 Brackets Sequence 括号匹配并输出方案
hdu 4745 Two Rabbits 转化成求回文串 
zoj 3541 The Last Puzzle  贪心+区间dp
poj 2955 Brackets
hdu 4283 You Are the One  常见写法
hdu 2476 String Printer 
zoj 3537 Cake
CF 149D Coloring Brackets
zoj 3469 Food Delivery

三、树形dp
比较好的博客：http://blog.csdn.net/woshi250hua/article/details/7644959
一篇论文：http://doc.baidu.com/view/f3b19d0b79563c1ec5da710e.html
树形dp是建立在树这种数据结构上的dp,一般状态比较好想，通过dfs维护从根到叶子或从叶子到根的状态转移。

hdu 4514  求树的直径
poj 1655 Balancing Act 
hdu 4714 Tree2Cycle 思维
hdu 4616 Game
hdu 4126 Genghis Kehan the Conqueror MST+树形dp 比较经典
hdu 4756 Install Air Conditioning MST+树形dp 同上
hdu 3660 Alice and Bob's Trip 有点像对抗搜索
CF 337D Book of Evil  树直径的思想 思维
hdu 2196 Computer 搜两遍

四、数位dp
推荐一篇论文：http://wenku.baidu.com/view/d2414ffe04a1b0717fd5dda8.html
数位dp,主要用来解决统计满足某类特殊关系或有某些特点的区间内的数的个数，它是按位来进行计数统计的，可以保存子状态，速度较快。数位dp做多了后，套路基本上都差不多，关键把要保存的状态给抽象出来，保存下来。

hdu 2089 不要62 简单数位dp
hdu 3709 Balanced Number 比较简单
CF 401D Roman and Numbers 状压+数位dp
hdu 4398 X mod f(x) 把模数加进状态里面
hdu 4734 F(x)  简单数位dp
hdu 3693 Math teacher's homework 思维变换的数位dp
hdu 4352 XHXJ's LIS　数位dp+LIS思想
CF 55D Beautiful Numbers  比较巧妙的数位dp
hdu 3565 Bi-peak Numbers 比较难想
CF 258B Little Elephant and Elections 数位dp+组合数学+逆元

五、概率(期望) dp
推荐博客：http://www.cnblogs.com/kuangbin/archive/2012/10/02/2710606.html
推荐博客：http://blog.csdn.net/woshi250hua/article/details/7912049
推荐论文：
《走进概率的世界》
《浅析竞赛中一类数学期望问题的解决方法》
《有关概率和期望问题的研究》
一般来说概率正着推，期望逆着推。有环的一般要用到高斯消元解方程。期望可以分解成多个子期望的加权和，权为子期望发生的概率，即 E(aA+bB+…) = aE(A) + bE(B) +…

ural 1776 Anniversiry Firework 比较基础
hdu 4418 Time travel  比较经典BFS+概率dp+高斯消元
hdu 4586 Play the Dice 推公式比较水
hdu 4487 Maximum Random Walk 
jobdu 1546 迷宫问题 高斯消元+概率dp+BFS预处理
hdu 3853 LOOPS 简单概率dp
hdu 4405 Aeroplane chess 简单概率dp,比较直接
hdu 4089 Activation 比较经典
poj 2096 Collecting Bugs 题目比较难读懂
zoj 3640 Help me Escape 从后往前，比较简单
hdu 4034 Maze 经典好题，借助树的概率dp
hdu 4336 Card Collector 状态压缩+概率dp

六、状态压缩dp
这类问题有TSP、插头dp等。
推荐论文：http://wenku.baidu.com/view/ce445e4f767f5acfa1c7cd51.html
推荐博客：http://blog.csdn.net/sf____/article/details/15026397
推荐博客：http://www.notonlysuccess.com/index.php/plug_dp/

hdu 4568 Hunter 最短路+TSP
hdu 4539  插头dp
hdu 4529 状压dp
poj 1185 炮兵阵地
hdu 3811 Permutation
poj 2411 Mandriann's Dream
poj 1038
poj 2441
hdu 2167
hdu 4026
hdu 4281

七、数据结构优化的dp
有时尽管状态找好了，转移方程的想好了，但时间复杂度比较大，需要用数据结构进行优化。常见的优化有二进制优化、单调队列优化、斜率优化、四边形不等式优化等。
1、二进制优化
主要是优化背包问题，背包九讲里面有介绍，比较简单，这里只附上几道题目。

hdu 1059 Diving 
hdu 1171 Big Event in Hdu
poj 1048 Follow My Magic

2、单调队列优化
推荐论文：http://wenku.baidu.com/view/4d23b4d128ea81c758f578ae.html
推荐博客：http://www.cnblogs.com/neverforget/archive/2011/10/13/ll.html

hdu 3401 Trade  
poj 3245 Sequece Partitioning 二分+单调队列优化

3、斜率优化
推荐论文：用单调性优化动态规划
推荐博客：http://www.cnblogs.com/ronaflx/archive/2011/02/05/1949278.html

hdu 3507 Print Article
poj 1260 Pearls
hdu 2829 Lawrence
hdu 2993 Max Average Problem

4、四边形不等式优化
推荐博客：http://www.cnblogs.com/ronaflx/archive/2011/03/30/1999764.html
推荐博客：http://www.cnblogs.com/zxndgv/archive/2011/08/02/2125242.html

hdu 2952 Counting Sheep
poj 1160 Post Office
hdu 3480 Division
hdu 3516 Tree Construction
hdu 2829 Lawrence

常见的动态规化类型总结

后续再总结