第五章 線性二次型最優(yōu)控制-1126

1、線性二次型最優(yōu)控制(1/12)第5章 線性二次型最優(yōu)控制對于最優(yōu)控制問題, 極大值原理很好地描述了動態(tài)系統(tǒng)的最優(yōu)控制解的存在性。但對于復雜的控制問題,如非線性系統(tǒng)的控制問題、系統(tǒng)模型與性能指標函數(shù)對控制量u(t)不為連續(xù)可微的控制問題, 其最優(yōu)控制規(guī)律存在性確定有很多困難(kn nn), 如非線性常微分方程求解最優(yōu)控制的非平凡性問題,會帶來閉環(huán)控制系統(tǒng)工程實現(xiàn)時困難性, 難以得到統(tǒng)一、簡潔的最優(yōu)控制規(guī)律的表達式。共五十四頁線性二次型最優(yōu)控制(2/12)然而，對于(duy)線性系統(tǒng), 若以狀態(tài)變量x(t)和控制變量u(t)的二次型函數(shù)的積分作為性能指標泛函, 這種動態(tài)系統(tǒng)的最優(yōu)控制問題稱為線性系

2、統(tǒng)的最優(yōu)二次型性能指標的最優(yōu)控制問題,簡稱為線性二次型問題，則有很多好的性質(zhì)。該類問題的優(yōu)點是能得到最優(yōu)控制解u*(t)的統(tǒng)一解析表達形式和一個簡單的且易于工程實現(xiàn)的最優(yōu)狀態(tài)反饋律。因此, 線性二次型問題對于從事自動控制研究的理論工作者和工程技術(shù)人員都具有很大吸引力。近40年來,人們對各種最優(yōu)狀態(tài)反饋控制系統(tǒng)的結(jié)構(gòu)、性質(zhì)以及設(shè)計方法進行了多方面的研究,并且有許多成功的應(yīng)用。共五十四頁線性二次型最優(yōu)控制(3/12)線性二次型問題是最優(yōu)控制理論中發(fā)展最為成熟、最有系統(tǒng)性、應(yīng)用最為廣泛和深入的分支(fnzh)。本節(jié)將陸續(xù)介紹線性二次型問題及其解的存在性、唯一性和最優(yōu)控制解的充分必要條件。線性系統(tǒng)的二

3、次型性能指標的最優(yōu)控制問題可表述如下，共五十四頁線性二次型最優(yōu)控制(4/12)線性二次型最優(yōu)控制問題 對于線性時變系統(tǒng)的狀態(tài)方程和輸出方程為 式中, x(t)是n維狀態(tài)向量, u(t)是r維控制向量, y(t)是m維輸出向量假定：A(t)，B(t)和C(t)分別是nn,nr和mn維的分段連續(xù)的時變矩陣。 假定系統(tǒng)的維數(shù)滿足0mrn, 且u(t)不受約束。z(t) 表示m維期望的輸出, 則定義(dngy)輸出誤差向量如下 e(t)=z(t)-y(t)共五十四頁線性二次型最優(yōu)控制(5/12)控制的目標是尋找最優(yōu)控制函數(shù)u*(t), 使下列二次型性能指標泛函為最小式中, F為mm 維非負定的常數(shù)矩陣

4、;Q(t)為mm 維時變的分段(fn dun)連續(xù)的非負定矩陣;R(t)為rr 維時變的分段連續(xù)的正定矩陣, 且其逆矩陣存在并有界;末態(tài)時刻tf 是固定的。共五十四頁線性二次型最優(yōu)控制(6/12)下面對論上述性能指標泛函:1) 性能指標泛函Ju()中的第1項e(tf)Fe(tf),是為了突出對末態(tài)目標的控制誤差的要求和限制(xinzh)而引進的,稱為末端成本函數(shù)。非負定的常數(shù)矩陣F為加權(quán)矩陣,其各行各列元素的值的不同,體現(xiàn)了對誤差向量e(t)在末態(tài)時刻tf各分量的要求不同, 重要性不同。若矩陣F的第i行第i列元素值較大,代表二次項的重要性較大, 對其精度要求較高。共五十四頁線性二次型最優(yōu)控制(

5、7/12)2) 性能指標泛函Ju()中的被積函數(shù)中的第1項e(t)Q(t)e(t),表示在系統(tǒng)過渡過程中對誤差向量e(t)的要求和限制(xinzh)。由于時變的加權(quán)矩陣Q(t)為非負定的,故該項函數(shù)值總是為非負的。一般情況下,e(t)越大,該項函數(shù)值越大,其在整個性能指標泛函所占的份量就越大。因此, 對性能指標泛函求極小化體現(xiàn)了對誤差向量e(t)的大小的約束和限制。在e(t)為標量函數(shù)時,該項可取為e2(t),于是該項與經(jīng)典控制理論中判別系統(tǒng)性能的誤差平方積分指標一致。共五十四頁線性二次型最優(yōu)控制(8/12)非負定的時變矩陣Q(t)為加權(quán)矩陣,其各行各列元素的值的不同,體現(xiàn)了對相應(yīng)的誤差向量e

6、(t)的分量在各時刻(shk)的要求不同、重要性不同。時變矩陣Q(t)的不同選擇, 對閉環(huán)最優(yōu)控制系統(tǒng)的性能的影響較大。共五十四頁線性二次型最優(yōu)控制(9/12)3) 性能指標泛函Ju()中的被積函數(shù)的第2項u(t)R(t)u(t),表示在系統(tǒng)工作過程中對控制向量u(t)的要求和限制。由于時變的加權(quán)矩陣R(t)為正定的,故該項函數(shù)值在u(t)為非零向量時總是為正的。u(t)越大,該項函數(shù)值越大,其在整個性能指標泛函所占的分量就越大。對性能指標泛函求極小化體現(xiàn)了對控制向量u(t)的大小的約束和限制。注：如u(t)為與電壓或電流成正比的標量函數(shù)時,該項為u2(t),并與功率成正比, u2(t)dt則

7、與在t0,tf區(qū)間(q jin)內(nèi)u(t)所做的功或所消耗的能量成正比。共五十四頁線性二次型最優(yōu)控制(10/12)因此,該項是用來衡量控制功率大小的代價（成本）函數(shù)。正定的時變矩陣R(t)亦為加權(quán)矩陣, 其各行各列元素的值的不同, 體現(xiàn)了對相應(yīng)的控制向量u(t)的分量在各時刻(t)的要求不同、重要性不同。時變矩陣R(t)的不同選擇, 對閉環(huán)最優(yōu)控制系統(tǒng)的性能的影響較大。綜上所述,可見線性系統(tǒng)的二次型性能指標泛函的最優(yōu)控制問題的實質(zhì)在于(ziy)用不大的控制量,來保持較小的控制誤差,以達到所耗費的能量和控制誤差的綜合最優(yōu)。共五十四頁線性二次型最優(yōu)控制(11/12)現(xiàn)在討論上述線性二次型問題的幾種

8、特殊情況。1) 若令C(t)=I, z(t)=0,則x(t)=-e(t)。這時, 線性二次型問題的性能指標泛函變?yōu)樵搯栴}轉(zhuǎn)化成:用不大的控制能量,使狀態(tài)x(t)保持在零值附近(fjn), 稱為狀態(tài)調(diào)節(jié)器問題。2) 若令z(t)=0,則y(t)=-e(t)。這時,線性二次型問題的性能指標泛函變?yōu)樵搯栴}轉(zhuǎn)化成:用不大的控制能量,使輸出值y(t)保持在零值附近,稱為輸出調(diào)節(jié)器問題。共五十四頁線性二次型最優(yōu)控制(12/12)3) 若z(t)0,則e(t)=z(t)-y(t)。這時,線性二次型問題為:用不大的控制能量,使輸出y(t)跟蹤期望信號z(t)的變化,稱為輸出跟蹤問題。下面將陸續(xù)介紹狀態(tài)調(diào)節(jié)器問

9、題的求解方法，解的性質(zhì)以及最優(yōu)狀態(tài)反饋(fnku)實現(xiàn)，具體內(nèi)容為：時變狀態(tài)調(diào)節(jié)器定常狀態(tài)調(diào)節(jié)器共五十四頁時變(sh bin)狀態(tài)調(diào)節(jié)器(1/3)5.1 時變狀態(tài)調(diào)節(jié)器狀態(tài)調(diào)節(jié)器問題為:用不大的控制(kngzh)能量,使狀態(tài)x(t)保持在零值附近的二次型最優(yōu)控制問題。該問題的描述如下;共五十四頁時變(sh bin)狀態(tài)調(diào)節(jié)器(2/3)有限時間LQ調(diào)節(jié)器問題 設(shè)線性時變系統(tǒng)的狀態(tài)方程和初始條件為式中, 控制量u(t)不受約束。尋找最優(yōu)控制函數(shù)(hnsh)u*(t), 使下列二次型性能指標泛函為最小式中,F和Q(t)為非負定矩陣;R(t)為正定矩陣;末態(tài)時刻tf是固定的。共五十四頁時變(sh bi

10、n)狀態(tài)調(diào)節(jié)器(3/3)由于所討論的系統(tǒng)為線性系統(tǒng), 給定(i dn)的性能指標泛函對狀態(tài)變量x(t)和控制量u(t)均連續(xù)可微, 因此,狀態(tài)調(diào)節(jié)器問題可用變分法、極大值原理和動態(tài)規(guī)劃方法中的任一種求解。本節(jié)采用變分法給出最優(yōu)控制解存在的充分必要條件及最優(yōu)控制問題解的表達式, 討論最優(yōu)控制解的存在性、唯一性等性質(zhì)及解的計算方法。內(nèi)容為：最優(yōu)控制的充分必要條件矩陣P(t)的若干性質(zhì)最優(yōu)控制的存在性與唯一性共五十四頁最優(yōu)控制的充分必要條件(b yo tio jin)(1/10)定理141. 最優(yōu)控制的充分必要條件定理(dngl)14(有限時間LQ調(diào)節(jié)器) 對于有限時間LQ調(diào)節(jié)器問題,為其最優(yōu)控制的

11、充分必要條件是相應(yīng)的最優(yōu)軌線為狀態(tài)方程的解,而最優(yōu)性能值為式中, P(t)為下述矩陣黎卡提微分方程的正定或半正定解:共五十四頁最優(yōu)控制的充分(chngfn)必要條件(2/10)證明 1）必要性證明。若u*(t)是最優(yōu)控制,需要證明由于系統(tǒng)性能指標泛函的宗量為x(t), u(t) 和x(tf) 。將有限時間LQ調(diào)節(jié)器問題(條件極值問題)化為無條件極值問題。引入維向量(xingling)拉格朗日算子, 性能指標函數(shù)為共五十四頁最優(yōu)控制的充分(chngfn)必要條件(3/10)因而該優(yōu)化問題就變?yōu)閷ι鲜鱿鄬?xingdu)于求極值問題。定義哈密頓函數(shù)則式(167)可以進一步表示為共五十四頁最優(yōu)控制的

12、充分(chngfn)必要條件(4/10)根據(jù)(gnj)極值的必要條件J=0,可以求得以及極值條件共五十四頁最優(yōu)控制的充分(chngfn)必要條件(5/10)由極值條件(173)得最優(yōu)控制律為注意到狀態(tài)方程和協(xié)態(tài)方程及其終端條件均為線性,因此,(t)和x(t), 之間必定為線性關(guān)系,可以表示(biosh)為由上述兩式可以得到u(t)的最優(yōu)解。其中矩陣P(t)滿足規(guī)范方程,可由規(guī)范方程解出。求解方法如下：共五十四頁最優(yōu)控制的充分(chngfn)必要條件(6/10)對方程(175)求導數(shù)得由方程(171), 又有比較(bjio)上述兩式,可以求得矩陣P(t)是矩陣黎卡提微分方程的對稱正定或半正定解。

13、因此,證明了定理的必要性。共五十四頁最優(yōu)控制的充分(chngfn)必要條件(7/10)2) 充分性證明(zhngmng)。已知,欲證u*(t)為最優(yōu)控制。引入如下等式共五十四頁最優(yōu)控制的充分(chngfn)必要條件(8/10)進而,利用(160)和(166),上式可以進一步表示為對上述(shngsh)方程進行配方得共五十四頁最優(yōu)控制的充分(chngfn)必要條件(9/10)由于P(tf)=F,可以導出這表明,當u=-R-1BPx時,性能指標將取最小值即u*=-R-1BPx為最優(yōu)控制。于是(ysh),定理的充分性得以證明。 共五十四頁最優(yōu)控制的充分(chngfn)必要條件(10/10)上述具有充

14、分必要的最優(yōu)控制實際上是一個線性狀態(tài)反饋,因此,可以將線性系統(tǒng)最優(yōu)狀態(tài)調(diào)節(jié)器的最優(yōu)控制表示成如圖6所示的狀態(tài)反饋形式(xngsh),其閉環(huán)系統(tǒng)的狀態(tài)方程為圖6 線性系統(tǒng)最優(yōu)狀態(tài)調(diào)節(jié)器上述結(jié)論是線性時變系統(tǒng)的結(jié)論, 當系統(tǒng)是線性定常的時候,上述結(jié)論仍然成立, 而且計算還要簡單。共五十四頁矩陣P(t)的若干(rugn)性質(zhì)(1/3)2. 矩陣P(t)的若干性質(zhì)對黎卡提微分方程的解P(t),有如下性質(zhì)。1) P(t)是黎卡提微分方程末值問題的解, 與初始狀態(tài)無關(guān)(wgun)。當在區(qū)間t0,tf內(nèi), A(t)、B(t)、R(t)和Q(t)為分段連續(xù)的時間函數(shù), R(t)為正定且其逆矩陣有界, Q(t)

15、矩陣為非負定時,則根據(jù)微分方程解的存在性和唯一性理論, P(t)的解在區(qū)間t0,tf內(nèi)唯一存在。共五十四頁矩陣P(t)的若干(rugn)性質(zhì)(2/3)2) 對于任意tt0,tf, P(t)是對稱(duchn)矩陣。事實上,將黎卡提微分方程和邊界條件的兩邊作轉(zhuǎn)置,并考慮到R(t), Q(t)和F都為對稱矩陣, 則有因此,矩陣P(t)及其轉(zhuǎn)置P(t)滿足同一個矩陣微分方程和邊界條件。根據(jù)微分方程解的存在性和唯一性理論,則對任意tt0,tf,有P(t)=P(t),即P(t)是對稱的。共五十四頁矩陣P(t)的若干(rugn)性質(zhì)(3/3)3) 于矩陣P(t)的對稱性,則nn維的黎卡提矩陣微分方程實質(zhì)上

16、是一個由n(n+1)/2個非線性標量(bioling)微分方程組成的微分方程組。因此, 求解P(t), 只要求解n(n+1)/2個非線性微分方程即可。共五十四頁最優(yōu)控制的存在(cnzi)性與唯一性(1/13)定理153. 最優(yōu)控制的存在性與唯一性對于一般的最優(yōu)控制問題,論證最優(yōu)控制解的存在性是很困難的,但對于最優(yōu)狀態(tài)調(diào)節(jié)器問題,可以證明最優(yōu)控制解的存在性和唯一性。對此,有如下定理。定理15 對線性時變(sh bin)系統(tǒng)的最優(yōu)狀態(tài)調(diào)節(jié)器問題,當tf 0。試求其最優(yōu)控制和最優(yōu)狀態(tài)(zhungti)軌線。解 由定理14,可以求出該問題的最優(yōu)控制為式中, p(t)是如下黎卡提微分方程及邊界條件的解共

17、五十四頁最優(yōu)控制的存在(cnzi)性與唯一性(6/13)由上述微分方程可知, p(t)的解滿足(mnz)積分上式,可得 其中共五十四頁最優(yōu)控制的存在(cnzi)性與唯一性(7/13)最優(yōu)狀態(tài)(zhungti)軌線為下列一階時變微分方程的解 于是得共五十四頁最優(yōu)狀態(tài)軌線為對上述線性定常系統(tǒng)的最優(yōu)狀態(tài)調(diào)節(jié)器問題,其最優(yōu)狀態(tài)反饋(fnku)律和閉環(huán)系統(tǒng)狀態(tài)方程都呈現(xiàn)時變的性質(zhì)。最優(yōu)控制的存在(cnzi)性與唯一性(8/13)圖7 狀態(tài)最優(yōu)調(diào)節(jié)器結(jié)構(gòu)圖這是最優(yōu)狀態(tài)調(diào)節(jié)器在tf的一個重要性質(zhì)。圖7是例11的最優(yōu)狀態(tài)調(diào)節(jié)器的結(jié)構(gòu)圖。圖中信號p(t)是對黎卡提微分方程進行電子電路模擬的結(jié)果,其初始信號p(0

18、)是對黎卡提微分方程的解在t=0時的值。共五十四頁最優(yōu)控制的存在(cnzi)性與唯一性(9/13)圖8(a)表示在a=-1,f=0,tf=1,x(0)=1和q=1時,以r為參數(shù)的一組最優(yōu)狀態(tài)軌線x(t)。當r很小時，即控制的價值在性能指標中不太重要,狀態(tài)x(t)（比重大）將迅速被控制到零值;當r很大時，即控制的價值較重要,狀態(tài)x(t)（比重(bzhng)?。⒂捎诳刂屏客度氲眯? 則衰減得很慢。圖8 不同r值最優(yōu)狀態(tài)調(diào)節(jié)器各變量變化軌跡 共五十四頁最優(yōu)控制的存在(cnzi)性與唯一性(10/13)圖8(b)表示以r為參數(shù)的一組最優(yōu)控制u(t)的曲線?？梢婋S著r的減小,在控制區(qū)間0,1的開始階段

19、(jidun), 控制量u(t)增大當 r0 時,控制將逐漸變成在 t=0 時刻的脈沖信號圖8 不同 r 值最優(yōu)狀態(tài)調(diào)節(jié)器各變量變化軌跡共五十四頁最優(yōu)控制的存在(cnzi)性與唯一性(11/13)圖8(c)表示以r為參數(shù)時,黎卡提微分方程的解p(t)的一組曲線。可見隨著r的減小,在控制區(qū)間0,1的開始階段,p(t)幾乎為一常數(shù)(chngsh);當r很小時, p(t)僅在控制區(qū)間的最后階段才呈現(xiàn)時變的性質(zhì)。圖8 不同r值最優(yōu)狀態(tài)調(diào)節(jié)器各變量變化軌跡 共五十四頁最優(yōu)控制的存在(cnzi)性與唯一性(12/13)圖9表示在 a=-1, q = r =1, f 取0或1的情況下,以tf為參數(shù)時黎卡提微分方程的解 p(t) 的一組曲線。這些曲線表明, 隨tf的增長,函數(shù)p(t)的前面部分趨于同一個穩(wěn)態(tài)值,其時變值僅在后面很小的時間段內(nèi)呈現(xiàn),而且該穩(wěn)態(tài)值與末端(m dun)條件無關(guān)。圖9 不同末端時刻p(t)曲線這一事實可用如下數(shù)學關(guān)系式來說明。共五十四頁最優(yōu)控制的存在(cnzi)性與唯一性(13/13)