动态规划(完整)
第6章动态规划
第6章 动态规划动态规划（Dynamic Programming ）是解决多阶段决策过程最优化的一种有用的数学方法。
它是由美国学者Richard .Bellman 在1951年提出的，1957年他的专著《动态规划》一书问世，标志着运筹学的一个重要分支－动态规划的诞生.动态规划也是一种将多变量问题转化为单变量问题的一种方法。
在动态规划中，把困难的多阶段决策问题变换成一系列相互联系的比较容易的单阶段问题一个个地求解。
动态规划是考察解决问题的一种途径 ,而不是一种特殊的算法，不像线性规划那样有统一的数学模型和算法（如单纯形法）.事实上，在运用其解决问题的过程中还需要运用其它的优化算法。
因此，动态规划不像其它方法局限于解决某一类问题,它可以解决各类多阶段决策问题。
动态规划在工程技术、经济管理等社会各个领域都有着广泛的应用，并且获得了显著的效果。
在经济管理方面,动态规划可以用来解决最优路径问题、资源分配问题、生产调度问题、库存管理问题、排序问题、设备更新问题以及生产过程最优控制问题等，是经济管理中一种重要的决策技术。
许多规划问题用动态规划的方法来处理,常比线性规划或非线性规划更有效。
特别是对于离散的问题，由于解析数学无法发挥作用，动态规划便成为了一种非常有用的工具。
动态规划可以按照决策过程的演变是否确定分为确定性动态规划和随机性动态规划；也可以按照决策变量的取值是否连续分为连续性动态规划和离散性动态规划。
本教材主要介绍动态规划的基本概念、理论和方法,并通过典型的案例说明这些理论和方法的应用。
6.1动态规划的基本理论6.1.1多阶段决策过程的数学描述有这样一类活动过程,其整个过程可分为若干相互联系的阶段，每一阶段都要作出相应的决策,以使整个过程达到最佳的活动效果。
任何一个阶段(stage ，即决策点)都是由输入(input ）、决策（decision ）、状态转移律（transformation function )和输出(output )构成的，如图6-1（a ）所示.其中输入和输出也称为状态(state ）,输入称为输入状态，输出称为输出状态。
动态规划.pdf
第三章：动态规划3.1 动态规划的基本概念一、动态决策问题：决策过程具有阶段性和时序性(与时间有关)的决策问题。
即决策过程可划分为明显的阶段。
二、什么叫动态规划(D.P.–Dynamic Program)：多阶段决策问题最优化的一种方法。
广泛应用于工业技术、生产管理、企业管理、经济、军事等领域。
三、动态规划(D.P.)的起源：1951年,(美)数学家R.Bellman等提出最优化原理，从而建立动态规划，名著《动态规划》于1957年出版。
四、动态决策问题分类：1、按数据给出的形式分为：•离散型动态决策问题。
•连续型动态决策问题。
2、按决策过程演变的性质分为：•确定型动态决策问题。
•随机型动态决策问题。
五1、阶段(stage)n ：作出决策的若干轮次。
n = 1、2、3、4、5。
2、状态(state)S n ：每一阶段的出发位置。
构成状态集，记为S nS 1={A}，S 2={B 1,B 2,B 3}，S 3={C 1,C 2,C 3}，S 4={D 1,D 2,D 3}，S 5={E 1,E 2}。
阶段的起点。
3、决策(decision)X n ：从一个阶段某状态演变到下一个阶段某状态的选择。
构成决策集，记为D n (S n )。
阶段的终点。
D 1(S 1)={X 1(A)}={B 1,B 2,B 3}= S 2，D 2(S 2)={X 2(B 1),X 2(B 2),X 2(B 3)}={C 1,C 2,C 3}=S 3，D 3(S 3)={X 3(C 1),X 3(C 2),X 3(C 3)}={D 1,D 2,D 3}=S 4，D 4(S 4)={X 4(D 1),X 4(D 2),X 4(D 3)}={E 1,E 2}=S 5D 5(S 5)={X 5(E 1),X 5(E 2)}={F;F}={F}。
4、策略(policy)：全过程中各个阶段的决策Xn 组成的有序总体{Xn }。
如 A àB2àC1àD1àE2àF5、子策略(sub-policy)：剩下的n个阶段构成n子过程，相应的决策系列叫n子策略。
动态规划1(qh)
4 1 C3
B2
2
2
C2 3
5 B1 4
3 C1 3
D3 5
E2
3
2
D2
4
F
4
2 E1
D1
A
B
C
D
E
F
动态规划的函数方程（DP）
建立DP函数方程是指确定过 程的阶段及阶段数，规定状态变 量和决策变量的取法，给出各阶 段的状态集合，允许决策集合， 状态转移方程和指标函数等。
在上面的计算过程中，利用了第 k阶段与第k+1阶段的关系：
f3(C1)=MIN r(C1,D1)+ f4(D1) r(C1,D2)+ f4(D2)
=MIN（3+6，3+5）=8 最短路线： C1——D2——E2——F 最优解： d3*(C1)= D2
4 A3
4 1 C3
B2
2
2
C2 3
5 B1 4
3 C1 3
D3 5
E2
3
2
D2
4
F
4
2 E1
D1
A
B
C
D
4
F
4
2 E1
D1
A
B
C
D
E
F
d1
r (S 1,d 1 (S 1))+ f2(S 2) f 1(S 1) d 1 (S 1)
S1
B1
B2
A
15
14
14
B2
4 A3
4 1 C3
B2
2
2
C2 3
5 B1 4
3 C1 3
D3 5
E2
3
第6章-动态规划
求解过程
由最后一个阶段的优化开始，按逆向顺序逐步 向前一阶段扩展，并将后一阶段的优化结果带 到扩展后的阶段中去，以此逐步向前推进，直 至得到全过程的优化结果。
f1
(
A)
min
dd11
( (
A, A,
B1) B2 )
ff22((BB12))
min
4 9
9 11
13
d1( A, B3) f2 (B3)
5 13
其最短路线是A→ B1→C2 →D2 →E ，相应的决 策变量是u1(A)=B1
因此，最优策略序列是：
u1(A) =B1, u2(B1)=C2, u3(C2)=D2, u4(D2)=E
5 8 C2 4 6 4
4 C3 2
C3
D1 4 2 6
D2 9 7
D3 5
D4
E1 1 F
E2 2
E5
F
动态规划的逆序解法与顺序解法
逆序（递推）解法：即由最后一段到第一段逐步 求出各点到终点的最短路线,最后求出A点到E点 的最短路线。运用逆序递推方法的好处是可以始 终盯住目标,不致脱离最终目标。 顺序解法：其寻优方向与过程的行进方向相同， 求解时是从第一段开始计算逐段向后推进，计算 后一阶段时要用到前一段求优的结果，最后一段 的计算结果就是全过程的最优结果。
B1
A
4+9=13
d(u1)+f2
B2
B3
f1(s1) u1*
《动态规划》课件
xx年xx月xx日
• 动态规划概述 • 动态规划的基本概念 • 动态规划的求解方法 • 动态规划的应用实例 • 动态规划的优化技巧 • 动态规划的总结与展望
目录
01
动态规划概述
定义与特点
定义
动态规划是一种通过将原问题分解为 相互重叠的子问题，并存储子问题的 解以避免重复计算的方法。
特点
动态规划适用于具有重叠子问题和最 优子结构的问题，通过将问题分解为 子问题，可以找到最优解。
动态规划的适用范围
最优化问题
01
动态规划适用于解决最优化问题，如最大/最小化问题、决策问
题等。
子问题重叠
02
动态规划适用于子问题重叠的情况，即子问题之间存在共享状
态或参数。
递归关系
03
动态规划适用于具有递归关系的问题，可以通过递归方式求解
机器调度问题
总结词
动态规划可以应用于机器调度问题，以确定最优的调度方案，满足生产需求并降低成本 。
详细描述
机器调度问题是一个经典的优化问题，涉及到如何分配任务到机器上，以最小化成本或 最大化效率。通过动态规划，可以将机器调度问题分解为一系列子问题，如确定每个任 务的调度顺序、分配机器等，并逐个求解子问题的最优解，最终得到整个调度方案的最
VS
详细描述
记忆化搜索法是一种优化技术，通过存储 已解决的子问题的解，避免重复计算，提 高求解效率。这种方法适用于子问题数量 较少且相互独立的情况。
04
动态规划的应用实例
最短路径问题
总结词
通过动态规划解决最短路径问题，可以找到 从起点到终点的最短路径。
详细描述
在图论中，最短路径问题是一个经典的优化 问题，旨在找到从起点到终点之间的一条路 径，使得路径上的所有边的权重之和最小。 动态规划是一种有效的解决方法，通过将问 题分解为子问题并存储子问题的解，避免了 重复计算，提高了求解效率。
第3章动态规划
第3章动态规划动态规划是一种通过将问题分解为子问题，并且以自底向上的方式求解子问题从而求解整个问题的算法设计方法。
它在计算机科学中的应用非常广泛，特别是在优化问题和组合优化问题中。
动态规划的核心思想是将问题划分为多个重叠子问题，并且将计算结果储存起来以供后续使用。
通过这种方式，可以避免重复计算，提高算法效率。
动态规划通常适用于满足最优子结构的问题，即问题的最优解可以通过一系列子问题的最优解得到。
在动态规划中，需要定义一个状态转移方程，用于描述问题的最优解与其子问题的最优解之间的关系。
通过利用状态转移方程，可以从最底层的子问题开始，逐步求解出更大规模的问题的最优解。
最终，可以得到整个问题的最优解。
动态规划的基本步骤包括问题建模、确定状态、定义状态转移方程、确定边界条件和计算最优解。
首先，需要将原始问题转化为适合动态规划求解的形式，通常可以采用数学建模的方法。
然后，需要确定问题的状态，即将问题划分为多个子问题，并且定义子问题的状态。
接下来，需要定义状态转移方程，该方程记录了问题的最优解与子问题的最优解之间的关系。
然后，需要确定边界条件，即问题的最基本解。
最后，通过逐步计算子问题的最优解，得到整个问题的最优解。
动态规划在多个领域都有广泛的应用。
在计算机科学中，动态规划被广泛应用于图论算法、字符串处理算法、序列比对算法等。
此外，动态规划还被应用于经济学、运筹学和生物学等领域的优化问题。
通过应用动态规划，可以有效地解决这些领域中的复杂问题。
总结起来，动态规划是一种通过将问题划分为多个子问题，并且利用状态转移方程求解子问题从而求解整个问题的算法设计方法。
通过避免重复计算，动态规划可以提高计算效率，并且被广泛应用于计算机科学和其他领域的问题求解。
动态规划专题讲义课件
VS
状态转移方程是动态规划中的重要概念，它描述了状态之间的转移关系。在求解问题时，通过状态转移方程可以将一个状态转移到另一个状态，从而逐步求解出问题的最优解。
状态转移方程的建立需要通过对问题进行深入分析，找出状态之间的依赖关系，并建立数学模型。在应用状态转移方程时，需要注意状态的初始状态和终止状态，以及状态转移过程中的约束条件。
02
动态规划的基本概念
最优化原理是动态规划的核心思想，它认为一个问题的最优解可以通过子问题的最优解来构建。在解决复杂问题时，将问题分解为若干个子问题，分别求解子问题的最优解，再利用子问题的最优解来求解原问题的最优解。
最优化原理的应用范围很广，包括计算机科学、运筹学、经济学等领域。通过将问题分解为子问题，可以降低问题的复杂度，提高求解效率。
自顶向下策略
自底向上策略
分支定界法：通过将问题分解为多个分支来解决问题，同时使用界限来排除不可能的解。与动态规划结合，可以更有效地处理具有大量状态和决策的问题。
THANK YOU
感谢各位观看
排班问题
如求解最优的排班方案，使得员工的工作计划合理且满足各种约束条件。
03
递推关系
建立子问题的解之间的递推关系，通过这种关系逐步求解更大规模的问题，直到达到原问题的解。
01
将原问题分解为子问题
将原问题分解为若干个子问题，这些子问题是原问题的较小规模或部分问题的解。
02
存储子问题的解
将已解决的子问题的解存储起来，以便在求解更大规模的问题时重复使用，避免重复计算。
03
动态规划的算法实现
状态空间法是动态规划的基本方法，通过构建状态转移方程来求解最优化问题。
状态转移方程描述了从状态转移至其他状态的过程，通过迭代更新状态变量的值，最终得到最优解。
(完整版)动态规划问题常见解法
(完整版)动态规划问题常见解法动态规划问题常见解法一、背包问题1. 0/1背包问题0/1背包问题是动态规划中的经典问题，解决的是在背包容量固定的情况下，如何选择物品放入背包，使得总价值最大化。
常见的解法有两种：记忆化搜索和动态规划。
记忆化搜索是一种自顶向下的解法，通过保存子问题的解来避免重复计算，提高效率。
动态规划是一种自底向上的解法，通过填表格的方式记录每个子问题的解，最终得到整个问题的最优解。
2. 完全背包问题完全背包问题是在背包容量固定的情况下，如何选择物品放入背包，使得总价值最大化，且每种物品可以选择任意个。
常见的解法有两种：记忆化搜索和动态规划。
记忆化搜索和动态规划的思路和0/1背包问题相似，只是在状态转移方程上有所不同。
二、最长公共子序列问题最长公共子序列问题是指给定两个序列，求它们之间最长的公共子序列的长度。
常见的解法有两种：递归和动态规划。
递归的思路是通过分别考虑两个序列末尾元素是否相等来进一步缩小问题规模，直至问题规模减小到边界情况。
动态规划的思路是通过填表格的方式记录每个子问题的解，最终得到整个问题的最优解。
三、最短路径问题最短路径问题是指在加权有向图或无向图中，求解从一个顶点到另一个顶点的最短路径的问题。
常见的解法有两种：Dijkstra算法和Bellman-Ford算法。
Dijkstra算法是通过维护一个距离表，不断选择距离最短的顶点来更新距离表，直至找到目标顶点。
Bellman-Ford算法是通过进行多次松弛操作，逐步缩小问题规模，直至找到目标顶点或发现负权环。
总结：动态规划是一种解决最优化问题的常见方法，它通过分组子问题、定义状态、确定状态转移方程和填表格的方式，来得到整个问题的最优解。
在解决动态规划问题时，可以采用记忆化搜索或者动态规划的策略，具体选择哪种方法可以根据问题的特点和优化的需要来决定。
动态规划讲解大全(含例题及答案)
多阶段决策过程的最优化问题。 在现实生活中，有一类活动的过程，由于它的特殊性，可将过程分成若干个互相联系的阶段，在 它的每一阶段都需要作出决策，从而使整个过程达到最好的活动效果。当然，各个阶段决策的选取不 是任意确定的，它依赖于当前面临的状态，又影响以后的发展，当各个阶段决策确定后，就组成一个 决策序列，因而也就确定了整个过程的一条活动路线，如图所示：（看词条图） 这种把一个问题看作是一个前后关联具有链状结构的多阶段过程就称为多阶段决策过程，这种问 题就称为多阶段决策问题。
在前面的例子中，第一个阶段就是点 A，而第二个阶段就是点 A 到点 B，第三个阶段是点 B 到点 C，而第四个阶段是点 C 到点 D。
状态：状态表示每个阶段开始面临的自然状况或客观条件，它不以人们的主观意志为转移，也称 为不可控因素。在上面的例子中状态就是某阶段的出发位置，它既是该阶段某路的起点，同时又是前 一阶段某支路的终点。
fout.close(); return 0; }
USACO 2.3 Longest Prefix
题目如下： 在生物学中，一些生物的结构是用包含其要素的大写字母序列来表示的。生物学家对于把长的序 列分解成较短的（称之为元素的）序列很感兴趣。 如果一个集合 P 中的元素可以通过串联（允许重复；串联，相当于 Pascal 中的 “+” 运算符） 组成一个序列 S ，那么我们认为序列 S 可以分解为 P 中的元素。并不是所有的元素都必须出现。 举个例子，序列 ABABACABAAB 可以分解为下面集合中的元素： {A, AB, BA, CA, BBC} 序列 S 的前面 K 个字符称作 S 中长度为 K 的前缀。设计一个程序，输入一个元素集合以及一 个大写字母序列，计算这个序列最长的前缀的长度。 PROGRAM NAME: prefix INPUT FORMAT 输入数据的开头包括 1..200 个元素（长度为 1..10 ）组成的集合，用连续的以空格分开的字 符串表示。字母全部是大写，数据可能不止一行。元素集合结束的标志是一个只包含一个 “.” 的行。 集合中的元素没有重复。接着是大写字母序列 S ，长度为 1..200,000 ，用一行或者多行的字符串 来表示，每行不超过 76 个字符。换行符并不是序列 S 的一部分。 SAMPLE INPUT (file prefix.in) A AB BA CA BBC . ABABACABAABC OUTPUT FORMAT 只有一行，输出一个整数，表示 S 能够分解成 P 中元素的最长前缀的长度。 SAMPLE OUTPUT (file prefix.out) 11 示例程序如下： #include <stdio.h>
《动态规划》课件
动态规划（Dynamic Programming）是一种用来解决复杂问题的算法思想。
什么是动态规划
动态规划是一种将问题拆分成子问题并进行最优解比较的算法，常用于求解最优化问题。
问题模型
状态
将问题抽象成能够描述当前情况的状态。
目标
定义问题的目标，通常是最小化或最大化某 个指标。
经典面试题：爬楼梯问题
爬楼梯问题是指给定楼梯的阶数，求解爬到楼顶的不同方式的数量。
经典面试题：硬币找零问题
硬币找零问题是指给定一定面值的硬币和一个金额，找到凑出该金额的最少 硬币数。
经典面试题：最长回文子串问题
最长回文子串问题是指找到给定字符串中最长的回文子串。
实用案例：机器人找出路
机器人找出路是指给定一个迷宫，找到从起点到终点的路径。
决策
根据状态作出选择或决策。
转移方程
根据子问题的最优解推导出整体问题的最优 解。
最优子结构和重叠子问题
1 最优子结构
问题的最优解包含了子问题的最优解。
2 重叠子问题
子问题之间存在重复的计算，可以利用记 忆化存储中间结果来优化。
动态规划三部曲
1
定义状态
明确问题的状导转移方程
国王游戏问题
国王游戏问题是指在一个棋盘上放置国王，使得它们无法互相攻击。
编辑距离问题
编辑距离问题是指计算两个字符串之间转换的最小操作次数，包括插入、删 除和替换操作。
矩阵连乘问题
矩阵连乘问题是指给定一系列矩阵，找到最佳的乘法顺序，使得计算乘法的总次数最小。
最长递增子序列问题
最长递增子序列问题是指找到给定序列中最长的递增子序列的长度。
斐波那契数列问题
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
主要内容:
§7.1多阶段决策问题 §7.2 动态规划的基本概念和基本原理
§7.3 动态规划应用举例
例 求解最短路问题
A1 2 Q 4 3 A3 A2 6 3 7 4 B1 1 4 2 4 4 1 5 6 B2 3 B3 3 3 C2 C1 3 4 T
Ⅰ
Ⅱ
Ⅲ
Ⅳ
分阶段的最短路径
• • • • • • • Ⅳ ： C1—T Ⅲ --Ⅳ : B1—C1—T Ⅱ--Ⅲ--Ⅳ ：A2—B1—C1—T Ⅰ--Ⅱ--Ⅲ --Ⅳ： Q—A2—B1—C1—T Q--A3—B1—C1—T Q--A3—B2—C2—T 3 4 7
决策为 xk 时的指标，则它就是第 k 段指标函
数，简记为vk 。 （2）过程指标函数（也称目标函数） 用f(sk , xk)表示第k子过程的指标函数。表
示处于第 k 段 sk 状态且所作决策为xk时，
从 sk 点到终点的距离。由此可见， f(sk , xk)
不仅跟当前状态 sk 有关，
还跟该子过程策略 pk(sk) 有关,严格说来，应
(6) 指标函数
用来衡量策略或子策略或决策的效果的 某种数量指标，就称为指标函数。它是定义 在全过程或各子过程或各阶段上的确定数量 函数。对不同问题，指标函数可以是诸如费 用、成本、产值、利润、产量、耗量、距离、 时间、效用，等等。
（1）阶段指标函数（也称阶段效应）
用vk(sk , xk)表示第 k 段处于状态 sk且所作
资规划, 排序问题和生产过程的最优控制
等问题;
§7.2 动态规划的基本概念和基本思想
一、基本概念
使用动态规划方法求解决策问题首先要将 问题改造成符合动态规划求解要求的形式, 要涉及以下概念: (1)阶段 (3)决策与策略 (2)状态 (4)状态转移方程
(5)指标函数
(6)基本方程
(1) 划分阶段 把一个复杂决策问题按时间或空间特 征分解为若干(n)个相互联系的阶段 (stage), 以便按顺序求解; 阶段变量描述当前所处的阶段位置，一
表示为 fk(sk , pk(sk)) 。它是由各阶段的阶段
指标函数 vk(sk , xk)累积形成的，对于 k 部子
过程的指标函数可以表示为：
fk ,n fk ,n (sk , xk , sk 1, xk 1, , sn , xn ) vk (s k , xk ) vk 1 (sk 1 , xk 1 ) vn (sn ,，p={A3,B2,C2,T}
二、动态规划的最优性原理
• 整个过程的最优策略应具有这样的性质: 无 论过去的状态和决策如何, 对前面的决策所 形成的状态而言, 后续的诸决策必须构成最 优策略； • 上一条成立的条件是阶段递推函数严格单 调。
在例题中，求解最短路线的计算公式可以概 括写成：
系统以前经历的状态和决策(历史)无关。
具有无后效性的多阶段决策过程的特点是系统过去的历史， 只能通过现阶段的状态去影响系统的未来，当前的状态就是 后过程发展的初始条件。
动态规划的应用
• 动态规划在工程技术, 企业管理, 军事部 门有广泛的应用; 可解决资源分配, 生产
调度, 库存管理, 路径优化, 设备更新, 投
界条件，表示全过程到第四阶段终点结束。
一般地，对于 n 个阶段的决策过程，假设只
考虑指标函数是“和”与“积”的形式，第 k
阶段和第 k+1 阶段间的递推公式可表示如下：
当过程指标函数为下列“和”的形式时 k k k k k k pk PK ( sk ) n
f (s ) opt { f (s , p (s ))}
采用顺序求解方法, 通过解一系列小问题
达到求解整个问题目的;
• 动态规划的各个决策阶段不但要考虑本阶
段的决策目标, 还要兼顾整个决策过程的
整体目标, 从而实现整体最优决策.
动态规划的分类:
• 离散确定型
• 离散随机型
• 连续确定型
• 连续随机型
动态规划的特点:
• 动态规划没有准确的数学表达式和定义 精确的算法, 它强调具体问题具体分析,
pk ,n{xk , xk 1, , xn} ，显然当
k=1时的 k 部子策略就是全过程策略。
(5) 状态转移方程
状态转移确定从一个状态到另一个状态的转
移过程, 由状态转移方程描述: sk+1 = T (sk, xk);
状态转移方程在大多数情况下可以由数学公 式表达, 如: sk+1 = sk + xk；
般用下标 k 表示;
(2) 确定状态
每阶段有若干状态(state), 表示某一阶段决策 面临的条件或所处位置及运动特征的量,称为 状态。反映状态变化的量叫作状态变量。 k 阶段的状态特征可用状态变量 sk 描述;
每一阶段的全部状态构成该阶段的状态集合 Sk，
并有skSk。每个阶段的状态可分为初始状态
f5 ( s5 ) 0 min {vk ( sk , xk ( sk )) f k 1 ( sk 1 )} f k ( sk ) x k X k ( sk ) k 4,3, 2,1
其中，vk 在这里表示从状态 sk 到由决策 xk
所决定的状态 sk+1 之间的距离。f5(s5)=0 是边
和终止状态，或称输入状态和输出状态，阶
段的初始状态记作sk ，终止状态记为sk+1 ，也 是下个阶段的初始状态。
(3) 决策、决策变量 所谓决策就是确定系统过程发展的方案， 决策的实质是关于状态的选择，是决策者 从给定阶段状态出发对下一阶段状态作出 的选择。 用以描述决策变化的量称之决策变量， 和状态变量一样，决策变量可以用一个数， 一组数或一向量来描述．也可以是状态变量 的函数，记以 xk xk (sk ) ，表示于 k 阶段状 态 sk 时的决策变量．
A1 2 Q 4 3 A3 6 3 A2
7 4
B1
1 4 C1 3 4 3 C2 T
2 4
6 B2 3 B3 3
4 1 5
k=2
f2(A1) = min{7+ f3(B1), 4+ f3(B2), 6+ f3(B3) } = min{11*, 11*, 12} = 11
f2(A2) = min{3+ f3(B1), 2+ f3(B2), 4+ f3(B3) } = min{7*, 9, 10 } = 7 f2(A3) = min{4+ f3(B1), 1+ f3(B2), 5+ f3(B3) } = = min{8*, 8*, 11 } = 8 k=1 f1(Q) = min{2+f2(A1), 4+f2(A2), 3+f2(A3)} = min{13, 11*, 11* } = 11 最短路是：Q A2 B1 C1 T，p={A2,B1,C1,T} Q A3 B1 C1 T ，p={A3,B1,C1,T}
A1 2 4 3 A3 6 3 A2
7 4
B1
1 4 C1 3 4 3 C2 T
2 4
6 B2 3 B3 3
4 1 5
vk sk , xk csk xk
过程指标（阶段递推）函数:
f k ( sk ) min vk ( sk , xk ) f
k 1
( sk 1 )
k=4 f4 (C1) = 3, k=3 f3(B1)=min{1+f4(C1)=4*, 4+f4(C2)=8}=4 f3(B2)=min{6+f4(C1)=9, 3+f4(C2)=7*}=7 f3(B3)=min{3+f4(C1)=6*, 3+f4(C2)=7}=6 f4 (C2) = 4
式中，表示某种运算，可以是加、减、、 乘、除、开方等．
多阶段决策问题中，常见的目标函数形式
之一是取各阶段效应之和的形式，即:
fk
v
i k
n
k
( sk , uk )
有些问题，如系统可靠性问题，其目标函 数是取各阶段效应的连乘积形式，
f k vk ( sk , uk )
i k n
(7) 最优解
11 11 11
最短路径
11
4
A1 2
11
7 4 3
B1
7
1 4
3
6
7
C1
Q
4 3
A2
8
2 4
6 3 3 3 C2
4
3 4 T
B2
6
A3
4 1 5
B3
Ⅰ
Ⅱ
Ⅲ
Ⅳ
最短路径解的特点
• 1、可以将全过程求解分为若干阶段求解；-----多阶段决策问题 • 2、在全过程最短路径中，将会出现阶段的最 优路径；-----递推性 • 3、前面的终点确定，后面的路径也就确定了， 且与前面的路径（如何找到的这个终点）无关； -----无后效性 • 3、逐段地求解最优路径，势必会找到一个全 过程最优路径。-----动态规划
当过程指标函数为下列“积”的形式时
fk (sk ) opt { fk (sk , pk (sk ))}
pk PK ( sk )
opt
pi Pk ( si ) i k
v (s , x )
i i i
n
相应的函数基本方程为 :
f (s ) 1 n1 n1 f k (sk ) opt {vk (sk , xk (sk )) f k 1 (sk 1 )} xk X k k n, n 1, ,2,1
opt
pk Pk ( sk ) i k
v (s , x )