文档介绍：教学大纲:理解动态规划基本概念、最优化原理和基本方程,通过资源分配和生产与存储等问题,学习应用动态规划解决多阶段决策问题。重点:掌握动态规划模型结构、逆序法算法原理、资源分配、设备更新、生产于存贮等问题。难点为动态规划中状态变量等的确定。AB1B2C1C2C3C4D1D2D3E1E2E3F1F2G531368766835338422123335526643123456第一节动态规划的研究对象和引例引例1最短路问题多阶段决策问题的典型例子::企业在生产过程中,由于需求是随时间变化的,因此企业为了获得全年的最佳生产效益,就要在整个生产过程中逐月或逐季度地根据库存和需求决定生产计划。:某种机器可以在高低两种不同的负荷下进行生产。在高负荷下进行生产时,产品的年产量g和投入生产的机器数量u1的关系为g=g(u1)12n状态决策状态决策状态状态决策这时,机器的年完好率为a,即如果年初完好机器的数量为u,到年终完好的机器就为au,0<a<1。在低负荷下生产时,产品的年产量h和投入生产的机器数量u2的关系为h=h(u2)假定开始生产时完好的机器数量为s1。要求制定一个五年计划,在每年开始时,决定如何重新分配完好的机器在两种不同的负荷下生产的数量,使在五年内产品的总产量达到最高。相应的机器年完好率b,0<b<1。:由于航天飞机的运动的环境是不断变化的,因此就要根据航天飞机飞行在不同环境中的情况,不断地决定航天飞机的飞行方向和速度(状态),使之能最省燃料和实现目的(如软着落问题)。不包含时间因素的静态决策问题(本质上是一次决策问题)也可以适当地引入阶段的概念,作为多阶段的决策问题用动态规划方法来解决。、非线性规划等静态的规划问题也可以通过适当地引入阶段的概念,应用动态规划方法加以解决,后面将详细介绍。最短路问题:给定一个交通网络图如下,其中两点之间的数字表示距离(或花费),试求从A点到G点的最短距离(总费用最小)。AB1B2C1C2C3C4D1D2D3E1E2E3F1F2G531368766835338422123335526643123456生产存贮决策问题最短路问题机器负荷分配问题典型问题:但要便于把问题的过程能转化为多阶段决策的过程。状态变量的取值有一定的允许集合或范围,此集合称为状态允许集合。、阶段变量把所给问题的过程,适当地分为若干个相互联系的阶段;描述阶段的变量称为阶段变量,常用k表示;阶段的划分,一般是按时间和空间的自然特征来划分;、状态变量每个阶段开始所处的自然状态或客观条件。通常一个阶段有若干个状态。描述过程状态的变量称为状态变量,常用sk表示第k阶段的状态。年、月、路段一个数、一组数、一个向量在实际问题中决策变量的取值往往在某一范围之内,此范围称为允许决策集合。常用Dk(sk)表示第k阶段从状态sk出发的允许决策集合,显然有一个数一组数一个向量决定下一阶段的状态,这种决定称为决策。在最优控制中也称为控制。描述决策的变量,称为决策变量。决策变量是状态变量的函数。常用uk(sk)表示第k阶段当状态为sk时的决策变量。、决策变量过程的某一阶段、某个状态,可以做出不同的决定(选择),uk(sk)Dk(sk)系统在某一阶段的状态转移不但与系统的当前的状态和决策有关,而且还与系统过去的历史状态和决策有关。其状态转移方程如下(一般形式)图示如下:状态转移方程是确定过程由一个状态到另一个状态的演变过程。如果第k阶段状态变量sk的值、该阶段的决策变量一经确定,第k+1阶段状态变量sk+1的值也就确定。,去控制过程发展的多段过程;其发展是通过一系列的状态转移来实现的;