动态规划（一）——序

合集 - 小蒟蒻的算法分享(17)

1.动态规划（一）——序2024-02-17

2.动态规划（二）——背包dp2024-02-173.动态规划（三）——线性dp2024-02-174.动态规划（四）——区间dp2024-02-175.动态规划（五）——坐标dp2024-02-176.HH的项链—树状数组2024-02-197.数列的异或和—树状数组2024-02-198.线段树—模板2024-02-209.情书密码—树状数组2024-02-2010.Blocks—单调栈2024-02-2211.动态规划（六）——树形dp2024-02-1712.2.23测试2024-02-2313.程序自动分析—并查集2024-03-0214.安慰奶牛—最小生成树2024-03-0615.神经网络—拓扑排序2024-03-0816.Perm 排列计数——Lucas&dfs2024-04-1317.bzoj4399: 魔法少女LJJ2024-05-10

收起

一、基本概念

动态规划(dynamic programming)是 运筹学 的一个分支，是求解决策过程(decision process)最优化的数学方法。20世纪50年代初 美国 数学家R.E.Bellman等人在研究多阶段决策过程(multistep decision process)的优化问题时，提出了著名的最优化原理(principle of optimality)，把多阶段过程转化为一系列单阶段问题，利用各阶段之间的关系，逐个求解，创立了解决这类过程优化问题的新方法——动态规划。1957年出版了他的名著《Dynamic Programming》，这是该领域的第一本著作。

动态规划过程是：每次决策依赖于当前状态，又随即引起状态的转移。一个决策序列就是在变化的状态中产生出来的，所以，这种多阶段最优化决策解决问题的过程就称为动态规划。

二、基本思想与策略

基本思想与分治法类似，也是将待求解的问题分解为若干个子问题（阶段），
按顺序求解子阶段，前一子问题的解，为后一子问题的求解提供了有用的信息。
在求解任一子问题时，列出各种可能的局部解，通过决策保留那些有可能达到最优的局部解，丢弃其他局部解。
依次解决各子问题，最后一个子问题就是初始问题的解。
 
由于动态规划解决的问题多数有重叠子问题这个特点，为减少重复计算，
对每一个子问题只解一次，将其不同阶段的不同状态保存在一个二维数组中。
 
与分治法最大的差别是：适合于用动态规划法求解的问题，经分解后得到的子问题往往不是互相独立的
（即下一个子阶段的求解是建立在上一个子阶段的解的基础上，进行进一步的求解）。

区别：

（1）动态规划和分治区别：

动态规划算法：它通常用于求解具有某种最优性质的问题。在这类问题中，可能会有许多可行解。
每一个解都对应于一个值，我们希望找到具有最优值的解。动态规划算法与分治法类似，其基本思想
也是将待求解问题分解成若干个子问题，先求解子问题，然后从这些子问题的解得到原问题的解。
与分治法不同的是，适合于用动态规划求解的问题，经分解得到子问题往往不是互相独立的。

分治法：若用分治法来解这类问题，则分解得到的子问题数目太多，有些子问题被重复计算了很多次。
如果我们能够保存已解决的子问题的答案，而在需要时再找出已求得的答案，这样就可以避免大量的重复计算，节省时间。
我们可以用一个表来记录所有已解的子问题的答案。

注：不管该子问题以后是否被用到，只要它被计算过，就将其结果填入表中。这就是动态规划法的基本思路。

三、适用的情况

能采用动态规划求解的问题的一般要具有3个性质：

(1) 最优化原理：如果问题的最优解所包含的子问题的解也是最优的，就称该问题具有最优子结构，即满足最优化原理。
 
(2) 无后效性：即某阶段状态一旦确定，就不受这个状态以后决策的影响。
也就是说，某状态以后的过程不会影响以前的状态，只与当前状态有关。

（3）有重叠子问题：即子问题之间是不独立的，一个子问题在下一阶段决策中可能被多次使用到。（该性质并不是动态规划适用的必要条件，但是如果没有这条性质，动态规划算法同其他算法相比就不具备优势）

四、求解的基本步骤

 动态规划所处理的问题是一个多阶段决策问题，一般由初始状态开始，通过对中间阶段决策的选择，达到结束状态。
 这些决策形成了一个决策序列，同时确定了完成整个过程的一条活动路线(通常是求最优的活动路线)。
 如图所示。动态规划的设计都有着一定的模式，一般要经历以下几个步骤。
 
初始状态→│决策１│→│决策２│→…→│决策ｎ│→结束状态
 
                  图1 动态规划决策过程示意图
 
(1)划分阶段：按照问题的时间或空间特征，把问题分为若干个阶段。在划分阶段时，
注意划分后的阶段一定要是有序的或者是可排序的，否则问题就无法求解。
 
(2)确定状态和状态变量：将问题发展到各个阶段时所处于的各种客观情况用不同的状态表示出来。
当然，状态的选择要满足无后效性。
 
(3)确定决策并写出状态转移方程：因为决策和状态转移有着天然的联系，状态转移就是根据
上一阶段的状态和决策来导出本阶段的状态。所以如果确定了决策，状态转移方程也就可写出。
但事实上常常是反过来做，根据相邻两个阶段的状态之间的关系来确定决策方法和状态转移方程。
 
(4)寻找边界条件：给出的状态转移方程是一个递推式，需要一个递推的终止条件或边界条件。
 
一般，只要解决问题的阶段、状态和状态转移决策确定了，就可以写出状态转移方程（包括边界条件）。

实际应用中可以按以下几个简化的步骤进行设计：

（1）分析最优解的性质，并刻画其结构特征。
 
（2）递归的定义最优解。
 
（3）以自底向上或自顶向下的记忆化方式（备忘录法）计算出最优值
 
（4）根据计算最优值时得到的信息，构造问题的最优解

五、算法实现的说明

动态规划的主要难点在于理论上的设计，也就是上面4个步骤的确定，一旦设计完成，实现部分就会非常简单。
 
 使用动态规划求解问题，最重要的就是确定动态规划三要素：
 
（1）问题的阶段 （2）每个阶段的状态
 
（3）从前一个阶段转化到后一个阶段之间的递推关系。
 
 递推关系必须是从次小的问题开始到较大的问题之间的转化，从这个角度来说，动态规划往往可以用递归程序来实现，
 不过因为递推可以充分利用前面保存的子问题的解来减少重复计算，所以对于大规模问题来说，有递归不可比拟的优势，
 这也是动态规划算法的核心之处。
 
确定了动态规划的这三要素，整个求解过程就可以用一个最优决策表来描述，最优决策表是一个二维表，
其中行表示决策的阶段，列表示问题状态，表格需要填写的数据一般对应此问题的在某个阶段某个状态下的最优值
（如最短路径，最长公共子序列，最大价值等），填表的过程就是根据递推关系，从1行1列开始，以行或者列优先的顺序，
依次填写表格，最后根据整个表格的数据通过简单的取舍或者运算求得问题的最优解。

————————————————
原文链接：https://blog.csdn.net/cangchen/article/details/45044811