动态规划讲解

![cover](http://wxlogo.ncuhome.cn/d_laptop2_1x.png)

##提纲

####0.动态规划基本概念

####1.动态规划的基本问题

- 简述钢条切割问题

- 子问题结构图

- 需要注意的地方

####2.如何区别其与贪心算法

- 背包问题

- Dijkstra

- ”贪心“的正确性证明

####3.动态规划与静态规划的关系

- 问题举例

![](http://wxlogo.ncuhome.cn/image_1x.png)

####0.动态规划基本概念

之所以叫**动态**规划,是因为该方法将问题分解为一个一个的阶段,每个阶段都有各自的状态,由特定的状态转移方程将当前的状态推到下一次的状态。于是可以看出来,在每一个阶段都有相应的”决策“去选择接下来的状态,所有阶段的决策排成一个序列,我们称它为策略。这种分阶段不断进行状态转移的问题,我们称之为动态规划问题。 

上面是运筹学里的概念,更多的是对于问题性质的总结归纳。而在实际的编程,就像算法导论里讲的那样,是具有最优子结构和重叠的子问题。所谓最优子结构是指原来的总体可以”划分为多个子问题的最优组合,并且子问题可以独立求解“。重叠的子问题是指在前面不断递归寻找最优子问题时,会不断碰到一样的子问题。这里不理解没关系,下面我会具体讲解。

####1.动态规划的基本问题

- 简述钢条切割问题(此处只做简单讲解作为楔子,有兴趣可看算法导论第三版相关内容)

>Serling公司购买长钢条,将其切割为短钢条出售。切割工序本身没有成本支出。公司管理层希望知道最佳的切割方案。假定我们知道Serling公司出售一段长为i英寸的钢条的价格为pi(i=1,2,…,单位为美元)。钢条的长度均为整英寸。图15-1给出了一个价格表的样例。![](http://wxlogo.ncuhome.cn/rectangle3.png)钢条切割问题是这样的:给定一段长度为n英寸的钢条和一个价格表pi(i=1,2,…n),求切割钢条方案,使得销售收益rn最大。注意,如果长度为n英寸的钢条的价格pn足够大,最优解可能就是完全不需要切割。

首先我们来看,如果暴力破解要遍历多少种方法。因为每两英寸之间都可以切割,它们有两种选择,被切割或拒绝,于是需要遍历2^(n-1)次,无法忍受。 

现在引入动态规划的思想,我先直接抛公式,再根据公式讲解。

>![](https://segmentfault.com/img/remote/1460000008730325?w=332&h=72) 

pi部分不进行继续切割,直接作为一个整体售出 ; 

rn−i部分继续切割,考虑所有的情况,分成子问题。 

求出所有k值对应的收益最大者作为rn 

根据这个数学模型,我们可以从两个角度看问题都可以,先是”自顶向下“: 

要求rn的最大值,而现在假设已经知道i从1到n的rn-1的最大值,只需要拿pi+rn-i各自加起来再比较就可以知道rn的最大值了。而要知道rn-1的最大值,也是同样的道理。最后会递归到长度为0,返回0就行了。 

同样也可以”自底向上“的看问题: 

要知道r1的最大值,可以直接返回p1;要知道r2的最大值,需要比较p1+r1和p2+r0(r0的值为0);……这样把所有的情况都比较得出来后,就可以知道rn的最大值了。 

这里将rn分解为pi+rn-i,并假设rn-i也是最优的方法,就是我开始说的”最优子结构“:先在所有”最优子结构“里找到各自进行”状态转移“后的最优值,再递归地求解最优子结构。 

这里需要注意的是,重叠的子问题:![](https://segmentfault.com/img/remote/1460000008730327?w=927&h=436)

解决办法很简单,建个数组把递归或遍历过的结果存起来,下次直接拿就可以了。

- 子问题结构图 

![](https://segmentfault.com/img/remote/1460000008730329?w=604&h=700/view)

这个可以理解为把上面那个树的图压缩成的东西,压缩掉的是那些重复计算的路径。每个定点都是一个子问题,子问题的求解时间则是射出去的边的总数。所以这时问题的时间复杂度变成了O(n(n+1)/2),化简为O(n^2)。

- 需要注意的地方 

1.有最优子结构也可能可以使用贪心算法解决(事实上能使用贪心算法的问题绝大多数都能使用动态规划)。 

2.子问题互相之间必须是无关的,比如求最长路径时遇到了环,不同的子问题都有重复的中间节点,这样分解出来的子问题就都是相关的,便不能使用动态规划解决。

####2.如何区别其与贪心算法

- 背包问题 

![](http://wxlogo.ncuhome.cn/rectangle4.png)

大家应该都知道贪心算法是每个阶段都追求局部的最优,然后达成全局的最优,必须要证明这样的合理性才能使用贪心算法,因为大部分情况下全局的最优每个阶段都不一定最优。 

像这里的部分背包问题可以使用反证法,假设当前背包里的物品价值已达到最高,而且没有每磅价值最高的物品,那么可以移除当前背包里价值最低的物品,并放入价值最高的物品,则背包的价值提升,与假设矛盾。于是这个问题可以每一次都拿当前价值最高的物品而得到整体价值的最高。

- Dijkstra 

[Dijkstra-维基百科](https://zh.wikipedia.org/wiki/%E6%88%B4%E5%85%8B%E6%96%AF%E7%89%B9%E6%8B%89%E7%AE%97%E6%B3%95) 

这里默认大家都懂这算法了。事实上这个算法就是典型的贪心算法,但这种问题也往往是动态规划里的入门示例(我的运筹学动态规划的例子就是这个)。 

Dijkstra的贪心原理的正确性在于:

>一个图中的点分为两个集合,一个是V:所有点的集合;另一个是S:表明已经找到最短路径的点,即一个点找到了最短路就加入S,而我们要证的就是加入S的点的最短路都已确定。设d[u]表示u点到源点的当前距离,z[u]表示u到源点的最短路。 

和证明整数的唯一分解定理有些类似,假设一个点u是加入S集合中的第一个不满足d[u]=z[u]的点,如果u点到源点s没有路,那么d[u]=z[u]=无穷,就不满足z[u]=d[u]这个条件了,所以可以得出s到u一定有条最短路。我们假设y点是V-S中的一点,y-u不一定存在,也就是说y有可能就是u点,然后假设x是y的紧邻前驱,但s-x也不一定存在,s点有可能为x点,因为x已经加入S了,x又是y的紧邻前驱,所以在松弛时已经计算出d[y]=z[y],(因为图中的s-u是一条最短路了,所以此路上的s-y也是s到y的最短路,否则s-u就不是s到u的最短路了)(根据收敛性质:(此中的字母与本文无关,只是描述收敛性质用到)s-u-v是图G某u点,v点属于V的最短路径,而且在松弛边(u,v)之前的任何时间d[u]=z[u],则在操作后总有d[v]=z[v]),到了这里我们就得出了两个不等式,1.在这条路径中看得出d[u]>=z[u]>=z[y]=d[y],2.在选择u点时,只有d[u]<=d[y]时,才会选到u点加入S,从而得到d[u]=d[y]=z[u]=z[y]。 

- ”贪心“的正确性证明 

易知,贪心算法一般是特殊的动态规划问题,其特殊性在于能证明局部最优策略的正确性。

####3.动态规划与静态规划的关系

- 问题举例

![](http://wxlogo.ncuhome.cn/rectangle.png)

![](http://wxlogo.ncuhome.cn/rectangle1.png)

我们能看到,这个问题的式子本身是很直观的线性规划问题,假如求最大值的表达式没有二次方,则可以直接用高中学习的线性规划知识画图解决。但是这种静态规划问题,可以人为的加入**阶段**的概念,然后用动态规划的思想解决,就像图片里那样。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 215,539评论 6 497
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,911评论 3 391
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 161,337评论 0 351
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,723评论 1 290
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,795评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,762评论 1 294
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,742评论 3 416
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,508评论 0 271
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,954评论 1 308
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,247评论 2 331
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,404评论 1 345
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,104评论 5 340
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,736评论 3 324
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,352评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,557评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,371评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,292评论 2 352

推荐阅读更多精彩内容

  • 动态规划应用于子问题重叠的情况。对于公共子问题,分治算法会做很多不必要的工作,它会反复求解公共子问题。而动态规划算...
    LRC_cheng阅读 432评论 0 1
  • 目录 动态规划与分治法 2.动态规划求解的最优化问题应该具备的两个要素2.1 最优子结构2.2 子问题重叠 动态规...
    王侦阅读 1,376评论 0 1
  • 1. 概述 动态规划与分治法相似,都是通过组合子问题来求解原问题。区别在于,分治法将问题划分为互不相交的子问题,递...
    10xjzheng阅读 1,352评论 0 0
  • 状态转移方程 从之前某个阶段的某个或某些状态状态到下一个状态之间的关系式,就叫做状态转移方程。 最优子结构 每个阶...
    Myth52125阅读 286评论 0 0
  • @你:本文最后有一小碗儿鸡汤,如果你没有增肌需求,又点开了推送,可以直接滑到最下给自己洗洗脑。阅读本文需要3分钟。...
    马克宥阅读 1,220评论 1 6