最优控制理论及应用.pptx

《最优控制理论及应用.pptx》由会员分享，可在线阅读，更多相关《最优控制理论及应用.pptx（130页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、2023年2月22日1一 基本概念最优控制理论中心问题：给定一个控制系统（已建立的被控对象的数学模型），选择一个容许的控制律，使被控对象按预定要求运行，并使给定的某一性能指标达到极小值（或极大值）第一章 最优控制问题的一般概念第1页/共130页2023年2月22日2二二 最优控制问题最优控制问题1 例子 飞船软着陆问题 宇宙飞船在月球表面着陆时速度必须为零，即软着陆，这要靠发动机的推力变化来完成。问题是如何选择一个推力方案，使燃料消耗最小。m 飞船的质量，h 高度，v 垂直速度，g 月球重力加速度常数，M 飞船自身质量F 燃料的质量第2页/共130页2023年2月22日3软着陆过程开始时刻t为

2、零 K为常数，初始状态 末端条件 第3页/共130页2023年2月22日4性能指标控制约束 任务：满足控制约束条件下，求发动机推力的最优变化律，使登月舱由初始出发点到达目标处（末态），并使性能指标达到极值（燃耗量最小）第4页/共130页2023年2月22日5例例2 2 火车快速运行问题火车快速运行问题 设火车从甲地出发，设火车从甲地出发，求容许控制，使其到达乙地时间最短。求容许控制，使其到达乙地时间最短。m m 火车质量；火车质量；火车加速度；火车加速度；u u（t t）产）产生加速度的推力且生加速度的推力且 火车运动方程火车运动方程 第5页/共130页2023年2月22日62 问题描述(1)

3、状态方程 一般形式为 为n维状态向量 为r维控制向量 为n维向量函数 给定控制规律 满足一定条件时，方程有唯一解 第6页/共130页2023年2月22日7(2)容许控制：,(3)目标集 n维向量函数 固定端问题 自由端问题 第7页/共130页2023年2月22日8(4)性能指标 对状态、控制以及终点状态的要求，复合型性能指标 积分型性能指标，表示对整个状态和控制过程的要求 终点型指标，表示仅对终点状态的要求 第8页/共130页2023年2月22日9最优控制的应用类型积分型1）最小时间控制2）最小燃耗控制3）最小能量控制第9页/共130页2023年2月22日10末值型复合型1）状态调节器2）输出

4、跟踪系统第10页/共130页2023年2月22日11最优控制的研究方法解析法：适用于性能指标及约束条件有明显解析式数值计算方法：性能指标比较复杂1）一维搜索法：适合单变量求极值2）多维搜索法：适合单变量求极值梯度法：解析与数值方法相结合1)无约束梯度法2)有约束梯度法第11页/共130页2023年2月22日12第二章第二章 最优控制中的变分法最优控制中的变分法 2.1 泛函与变分法基础平面上两点连线的长度问题 其弧长为第12页/共130页2023年2月22日13一般来说，曲线不同，弧长就不同，即弧长依赖于曲线，记为 。，称为泛函。，称泛函的宗量 泛函定义：x(t)是自变量t的函数，若对每个函数

5、x(t)，有一个J值与之对应，则变量J称为依赖于x(t)的泛函，记J(x(t)例举：第13页/共130页2023年2月22日14线性泛函与连续泛函：线性泛函 泛函对宗量是线性的连续泛函 若定义在线性赋范空间上的泛函又满足连续条件，称J(x)为连续线性泛函 第14页/共130页2023年2月22日15泛函与函数的几何解释 宗量的变分 泛函的增量 泛函的变分 Jd=第15页/共130页2023年2月22日16定理 2.1 泛函的变分为 第16页/共130页2023年2月22日17例 2.1 求泛函的变分 第17页/共130页2023年2月22日18泛函的极值定理 2.2 若泛函 有极值，则必有第1

6、8页/共130页2023年2月22日19变分学预备定理第19页/共130页2023年2月22日202.2 欧拉方程(1)(1)无约束泛函极值的必要条件无约束泛函极值的必要条件定理定理2.3 2.3 设有如下泛函极值问题设有如下泛函极值问题设有如下泛函极值问题设有如下泛函极值问题：及横截条件第20页/共130页2023年2月22日21 2.2 欧拉方程 变分 分部积分 证明：第21页/共130页2023年2月22日22例 2.2 求平面上两固定点间连线最短的曲线，直线 第22页/共130页2023年2月22日23例例2.32.3：已知边界条件为已知边界条件为 求使泛函达到极值的轨求使泛函达到极值

7、的轨线线解：解：第23页/共130页2023年2月22日242.2 欧拉方程(2)(2)有等式约束泛函极值的必要条件有等式约束泛函极值的必要条件定理定理2.4 2.4 设有如下泛函极值问题设有如下泛函极值问题设有如下泛函极值问题设有如下泛函极值问题：及横截条件第24页/共130页2023年2月22日25例例2.42.4：设人造地球卫星姿态控制系统的状态方：设人造地球卫星姿态控制系统的状态方程为程为第25页/共130页2023年2月22日26 2.3 2.3 横截条件横截条件 讨论：A.B.C.D.第26页/共130页2023年2月22日27左端固定右端沿曲线变动 横截条件C的推导第27页/共1

8、30页2023年2月22日28 第28页/共130页2023年2月22日29例 2.5 设性能指标泛函 末值时刻 未定，已知，解：由欧拉方程得由x(0)=1求出b=1；由横截条件知第29页/共130页2023年2月22日30第30页/共130页2023年2月22日31 2.4 含有多个未知函数泛函的极值 泛函 欧拉方程 边界值 横截条件 第31页/共130页2023年2月22日32 2.5 条件极值状态方程 泛函 引进乘子 构造新的函数和泛函 欧拉方程 约束方程 第32页/共130页2023年2月22日33例 2.6 泛函约束方程 边界条件 试求使泛函有极值。解：化为标准形式 把问题化为标准形

9、式，令第33页/共130页2023年2月22日34约束方程可定为边界条件为第34页/共130页2023年2月22日35引进乘子构造函数欧拉方程 第35页/共130页2023年2月22日36解出 其中，和为任意常数。代入约束方程，并求解可得将利用边界条件，可得：第36页/共130页2023年2月22日37于是，极值曲线和为：第37页/共130页2023年2月22日38问题：确定最优控制 和最优轨线 ，使系统 由已知初态转移到要求的目标集 2.6变分法解最优控制问题并使指定的目标泛函达到极值第38页/共130页2023年2月22日39 2.6.1末端时刻固定时最优解的必要条件（1）末端受约束的情况

10、引入拉格朗日乘子构造广义泛函 有构造哈米顿函数 第39页/共130页2023年2月22日40变分第40页/共130页2023年2月22日41定理2.5：对于如下最优控制问题：u(t)无约束，tf固定.最优解的必要条件第41页/共130页2023年2月22日42定理2.6：对于如下最优控制问题：u(t)无约束，tf固定，x(tf)自由.最优解的必要条件（2）末端自由的情况第42页/共130页2023年2月22日43定理2.7：对于如下最优控制问题：u(t)无约束，tf固定，x(tf)固定.最优解的必要条件（3）末端固定的情况第43页/共130页2023年2月22日44例 2.7 考虑状态方程和初

11、始条件为的简单一阶系统，其指标泛函为，使其中，给定，试求最优控制有极小值。0t，第44页/共130页2023年2月22日45，伴随方程 边界条件 由必要条件 解:引进伴随变量，构造哈米顿函数第45页/共130页2023年2月22日46则最优控制为 得代入状态方程求解得令，则有第46页/共130页2023年2月22日47边界条件 指标泛函 哈米顿函数 伴随方程，例 2.8 重解例 2.4 其解为 第47页/共130页2023年2月22日48 第48页/共130页2023年2月22日49习题1：设一阶系统方程为性能指标取为式中常数试求使J取极小值的最优控制和相应的性能指标习题2：设二阶系统方程为性

12、能指标取为求系统由已知初态 在 转移到目标集 且使J取极小的最优控制和最优轨迹第49页/共130页2023年2月22日50 2.6.2 末端时刻自由的最优解问题tf有时是可变的，是指标泛函，选控制使有tf极小值 变分 第50页/共130页2023年2月22日51 ，必要条件第51页/共130页2023年2月22日52例 2.7 指标泛函 哈米顿函数 伴随方程 必要条件 第52页/共130页2023年2月22日53 第三章第三章 最大值原理最大值原理 3.1 古典变分法的局限性u(t)受限的例子 矛盾!例 3.1伴随方程 极值必要条件 第53页/共130页2023年2月22日54 3.2 最大值

13、原理且 定理 3.1(最小值原理)设为容许控制，为对应的积分轨线，为使为最优控制，为最优轨线，必存在一向量函数，使得和满足正则方程 第54页/共130页2023年2月22日55最小值原理只是最优控制所满足的必要条件。但对于线性系统，最小值原理也是使泛函取最小值得充分条件。第55页/共130页2023年2月22日56例 3.2 重解例 3.1，哈密顿函数 伴随方程 由极值必要条件，知 ，又于是有第56页/共130页2023年2月22日57，协态变量与控制变量的关系图 第57页/共130页2023年2月22日58,，例 3.3 性能指标泛函 哈密顿函数 伴随方程，第58页/共130页2023年2月

14、22日59上有 第59页/共130页2023年2月22日60协态变量与控制变量的关系图 整个最优轨线 第60页/共130页2023年2月22日61例 3.4 把系统状态在终点时刻转移到 性能指标泛函 终点时刻是不固定的 哈米顿函数 伴随方程，第61页/共130页2023年2月22日62H是u的二次抛物线函数，u在 上一定使H有最小值，可能在内部，也可能在边界上。最优控制可能且只能取三个值 此二者都不能使状态变量同时满足初始条件和终点条件 第62页/共130页2023年2月22日63，最优控制 最优轨线 最优性能指标 第63页/共130页2023年2月22日64例 3.5 使系统以最短时间从给定

15、初态转移到零态 哈米顿函数 伴随方程 第64页/共130页2023年2月22日65最优控制切换及最优轨线示意图 第65页/共130页2023年2月22日66 3.3 古典变分法与最小值原理古典变分法适用的范围是对u无约束，而最小值原理一般都适用。特别当u不受约束时，条件就等价于条件第66页/共130页2023年2月22日67 3.4 3.4 极大值原理的应用：极大值原理的应用：快速控制系统快速控制系统在实际问题中，经常发生以时间为性能指标的控制问题。如，当被控对象受干扰后，偏离了平衡状态，希望施加控制能以最短时间恢复到平衡状态。凡是以运动时间为性能指标的最优控制问题称为最小时间控制。第67页/

16、共130页2023年2月22日68 3.4.1 快速控制问题性能指标 时间上限是可变的 从状态转移平衡状态所需时间最短 构造哈密顿函数 最小值原理 分段常值函数 第68页/共130页2023年2月22日69例 3.4.1 有一单位质点，在 处以初速度2沿直线运动。现施加一力 ，使质点尽快返回原点，并停留在原点上。力 简称为控制。若其它阻力不计，试求此控制力。质点运动方程 状态方程 哈密顿函数 伴随方程 第69页/共130页2023年2月22日70最优控制 协态变量与控制函数4种情况示意图 第70页/共130页2023年2月22日71相轨线族示意图 开关曲线 第71页/共130页2023年2月2

17、2日72开关曲线 总时间 初始状态 最优控制 状态方程 相轨线 最优控制 第72页/共130页2023年2月22日73 3.4.2 综合问题 综合是将最优控制函数表示为状态和时间的函数即上例之最优综合控制函数 第73页/共130页2023年2月22日74例 3.4.2 求快速返回原点的开关曲线和最优综合控制函数 构造哈密顿函数 伴随方程 最优控制 第74页/共130页2023年2月22日75最优控制与协态变量的变化情况 控制是“砰砰控制”，除了首尾之外，在和上的停留时间均为 第75页/共130页2023年2月22日76备选最优轨线族 两族同心圆方程 第76页/共130页2023年2月22日77

18、相点沿轨线顺时针方向运动，其速度为开关曲线 第77页/共130页2023年2月22日78第二段开关曲线 第78页/共130页2023年2月22日79整个开关曲线 第79页/共130页2023年2月22日80最优综合控制函数 第80页/共130页2023年2月22日81 第四章第四章 线性二次型性能指标的最优控制线性二次型性能指标的最优控制 用最大值原理求最优控制，求出的最优控制 通常是时间的函数，这样的控制为开环控制 当用开环控制时，在控制过程中不允许有任何干扰，这样才能使系统以最优状态运行。在实际问题中，干扰不可能没有，因此工程上总希望应用闭环控制，即控制函数表示成时间和状态的函数。求解这样

19、的问题一般来说是很困难的。第81页/共130页2023年2月22日82 但对一类线性的且指标是二次型的动态系统，却得了完全的解决。不但理论比较完善，数学处理简单，而且在工际中又容易实现，因而在工程中有着广泛的应用。第82页/共130页2023年2月22日83 4.1 问题提法动态方程 指标泛函 使求有最小值此问题称线性二次型性能指标的最优控制问题通常称为综合控制函数第83页/共130页2023年2月22日84指标泛函的物理意义积分项，被积函数由两项组成，都是二次型。第一项过程在控制过程中，实际上是要求每个分量越小越好，但每一个分量不一定同等重要，所以用加权来调整，当权为零时，对该项无要求。第二

20、项控制能力能量消耗最小。对每个分量要求不一样，因而进行加权。要求正定，一方面对每个分量都应有要求，否则会出现很大幅值，在实际工程中实现不了；另一方面，在计算中需要有逆存在。指标中的第一项是对点状态的要求，由于对每个分量要求不同，用加权阵来调整。第84页/共130页2023年2月22日85 4.2.1 末端自由问题构造哈密顿函数 伴随方程及边界条件 最优控制应满足 4.2 状态调节器第85页/共130页2023年2月22日86求导 第86页/共130页2023年2月22日87（矩阵黎卡提微分方程）边界条件 令最优控制是状态变量的线性函数借助状态变量的线性反馈可实现闭环最优控制 最优控制 对称半正

21、定阵 第87页/共130页2023年2月22日88例 4.1 性能指标泛函 最优控制 黎卡提微分方程 第88页/共130页2023年2月22日89最优轨线 最优控制 最优轨线的微分方程 解 第89页/共130页2023年2月22日90黎卡提方程的解 随终点时间变化的黎卡提方程的解 第90页/共130页2023年2月22日91 4.2.2 固定端问题（设）指标泛函 采用“补偿函数”法 补偿函数 惩罚函数 边界条件 黎卡提方程 逆黎卡提方程 第91页/共130页2023年2月22日92求导 黎卡提方程乘以逆黎卡提方程 解 逆 第92页/共130页2023年2月22日93 4.2.3 的情况性能指标

22、 无限长时间调节器问题 黎卡提方程 边界条件 最优控制 最优指标 第93页/共130页2023年2月22日94 4.2.4 定常系统完全可控 指标泛函 矩阵代数方程 最优控制 最优指标 第94页/共130页2023年2月22日95例 4.2 黎卡提方程 第95页/共130页2023年2月22日96 4.3 输出调节器输出调节器问题状态调节器问题 指标泛函 令第96页/共130页2023年2月22日97 4.4 跟踪问题问题的提法 已知的理想输出 偏差量 指标泛函 寻求控制规律使性能指标有极小值。物理意义 在控制过程中，使系统输出尽量趋近理想输出，同时也使能量消耗最少。第97页/共130页202

23、3年2月22日98指标泛函 哈密顿函数 第98页/共130页2023年2月22日99设并微分第99页/共130页2023年2月22日100的任意性 最优控制 第100页/共130页2023年2月22日101最优轨线方程 最优性能指标 第101页/共130页2023年2月22日102例 4.3，性能指标 第102页/共130页2023年2月22日103最优控制 第103页/共130页2023年2月22日104，最优控制 极限解 第104页/共130页2023年2月22日105闭环控制系统结构 第105页/共130页2023年2月22日106两种方法 庞特里雅金 前苏联学者 极大值原理 贝尔曼 美

24、国学者 动态规划 应用在过程控制、国防建设、经济规划、管理 多个分支 分布参数的最优控制、随机最优控制、大系统最优控制以及多方多层次的微分对策和主从对策等 第106页/共130页2023年2月22日107 第五章第五章 动态规划动态规划动态规划是求解最优控制的又一种方法，特别对离散型控制系统更为有效，而且得出的是综合控制函数。这种方法来源于多决策过程，并由贝尔曼首先提出，故称贝尔曼动态规划。第107页/共130页2023年2月22日108 5.1 多级决策过程与最优性原理作为例子，首先分析最优路径问题(a)(b)(c)试分析(a),(b)和(c)三种情况的最优路径，即从 走到 所需时间最少。规

25、定沿水平方向只能前进不能后退。第108页/共130页2023年2月22日109(a)中只有两条路径，从起点开始，一旦选定路线，就直达终点，选最优路径就是从两条中选一条，使路程所用时间最少。这很容易办到，只稍加计算，便可知道，上面一条所需时间最少。(b)共有6条路径可到达终点，若仍用上面方法，需计算6次，将每条路线所需时间求出，然后比较，找出一条时间最短的路程。(c)需计算20次，因为这时有20条路径，由此可见，计算量显著增大了。第109页/共130页2023年2月22日110逆向分级计算法 逆向是指计算从后面开始，分级是指逐级计算。逆向分级就是从后向前逐级计算。以(c)为例 从倒数第一级开始，

26、状态有两个，分别为 和 在处，只有一条路到达终点，其时间是；在 处，也只有一条，时间为1。后一条时间最短，将此时间相应地标在 点上。并将此点到终点的最优路径画上箭头。第110页/共130页2023年2月22日111然后再考虑第二级 只有一种选择，到终点所需时间是 有两条路，比较后选出时间最少的一条，即4+1=5。用箭头标出 也标出最优路径和时间 依此类推，最后计算初始位置 求得最优路径 最短时间为 13第111页/共130页2023年2月22日112最优路径示意图 第112页/共130页2023年2月22日113多级过程 多级决策过程 目标函数 控制目的 选择决策序列 使目标函数取最小值或最大

27、值 实际上就是离散状态的最优控制问题 第113页/共130页2023年2月22日114最优性原理 在一个多级决策问题中的最优决策具有这样的性质，不管初始级、初始状态和初始决策是什么，当把其中任何一级和状态做为初始级和初始状态时，余下的决策对此仍是最优决策。第114页/共130页2023年2月22日115指标函数多是各级指标之和，即具有可加性 最优性原理的数学表达式 第115页/共130页2023年2月22日116 5.2 离散系统动态规划阶离散系统 性能指标 求决策向量 使 有最小值（或最大值），其终点可自由，也可固定或受约束。第116页/共130页2023年2月22日117引进记号 应用最优

28、性原理 可建立如下递推公式 贝尔曼动态规划方程 第117页/共130页2023年2月22日118例 5.2 设一阶离散系统，状态方程和初始条件为性能指标 求使 有最小值的最优决策序列和最优轨线序列 指标可写为 第118页/共130页2023年2月22日119代入 上一级第119页/共130页2023年2月22日120代入状态方程 最优决策序列 最优轨线 第120页/共130页2023年2月22日121 5.3 连续系统的动态规划性能指标 目标集 引进记号 根据最优性原理及第121页/共130页2023年2月22日122第122页/共130页2023年2月22日123由泰勒公式，得 由中值定理，

29、得 第123页/共130页2023年2月22日124连续型动态规划方程 实际上它不是一个偏微分方程，而是一个函数方程和偏微分方程的混合方程 第124页/共130页2023年2月22日125满足连续型动态规划方程，有 设边界条件 动态规划 动态规划方程是最优控制函数满足的充分条件；解一个偏微分方程；可直接得出综合函数 ；动态规划要求 有连续偏导数最大值原理 最大值原理是最优控制函数满足的必要条件；解一个常微分方程组；最大值原理则只求得 。第125页/共130页2023年2月22日126例 5.3 一阶系统，性能指标 动态规划方程 右端对u求导数，令其导数为零，则得 第126页/共130页2023

30、年2月22日127 5.4 动态规划与最大值原理的关系变分法、最大值原理和动态规划都是研究最优控制问题的求解方法，很容易想到，若用三者研究同一个问题，应该得到相同的结论。因此三者应该存在着内在联系。变分法和最大值原理之间的关系前面已说明，下面将分析动态规划和最大值原理的关系。可以证明，在一定条件下，从动态规划方程能求最大值原理的方程。第127页/共130页2023年2月22日128最优控制理论 上世纪50年代初 问题比较简单 二阶定常系统 方法比较特殊 借助于几何图形 动态系统的最优化问题乃是一个变分问题 变分法 开集 最优控制问题 闭集 发展变分法 第128页/共130页2023年2月22日129动态规划方程 令哈米顿函数 最大值原理的必要条件 第129页/共130页2023年2月22日130感谢您的观看！第130页/共130页