×

离散马尔可夫跳跃线性系统的最优决策策略。 (英语) Zbl 1520.93604号

摘要:本文研究了模态转移概率矩阵(MTPM)可以通过决策调整的离散马尔可夫跳变线性系统(MJLS)。基于切换系统中切换律的设计,在考虑决策成本的情况下,提出了用于稳定和优化此类MJLS的最优决策策略。首先,以系统稳定性为目标,给出了具有初始MTPM的稳定和不稳定MJLS的可行决策域。其次,提出了一个包含状态成本和决策成本的广义性能指标,并通过随机动态规划得到了该指标与决策之间的定量关系。最后,为了优化性能指标,提出了一种值迭代算法及其收敛性证明。该算法在可行域内搜索最优决策,在保证稳定性的基础上取得了优异的性能。仿真结果表明了所提出的最优决策策略的有效性。

MSC公司:

93E15型 控制理论中的随机稳定性
93C55美元 离散时间控制/观测系统
93二氧化碳 控制理论中的线性系统
PDF格式BibTeX公司 XML格式引用
全文: 内政部

参考文献:

[1] Al-Tamimi,A。;刘易斯,F.L。;Abu-Khalaf,M.,使用近似动态规划的离散时间非线性HJB解决方案:收敛证明,IEEE系统、人与控制论汇刊,B部分(控制论),38,4,943-949(2008)·doi:10.1109/TSMCB.2008.926614
[2] Bertsekas,D.P.,《非线性规划》(1999),雅典娜科学出版社·Zbl 1015.90077号
[3] Boukas,E.K。;Haurie,A.,《制造流程控制和预防维护:随机控制方法》,IEEE自动控制汇刊,35,9,1024-1031(1990)·Zbl 0718.90036号 ·数字对象标识代码:10.1109/9.58530
[4] Boukas,E.K。;Liu,Z.,制造系统的生产和维护控制,IEEE自动控制汇刊,46,9,1455-1460(2001)·Zbl 1031.93013号 ·doi:10.1109/9.948477
[5] Boukas,E.K。;Yang,H.,制造流程的优化控制和预防性维护,IEEE自动控制汇刊,41,6,881-885(1996)·Zbl 0855.90065号 ·数字对象标识代码:10.1109/9.506243
[6] 博伊德,S。;Vandenberghe,L.,《凸优化》(2004),剑桥大学出版社·Zbl 1058.90049号
[7] Brockett,R.(2008)。可观测连续时间马尔可夫链的最优控制。2008年第47届IEEE决策与控制会议(第4269-4274页)。
[8] 曹,Z。;牛,Y。;Lam,J.等人。;Song,X.,通过转移率优化设计实现马尔科夫跳跃系统的混合滑模控制方案,IEEE系统、人与控制论汇刊:系统,51,12,7752-7763(2020)·doi:10.1109/TSMC.2020.2980851
[9] Chen,W。;Zhu,J.,具有可控模式转移率矩阵的连续马尔可夫跳跃线性系统的模式反馈控制策略,最优控制应用与方法,40,1,186-202(2019)·Zbl 1411.93165号 ·doi:10.1002/oca.v40.1
[10] 科斯塔,O.L.V。;Figueiredo,D.Z.,一般Borel空间中带马尔可夫链的跳变离散线性系统的随机稳定性,IEEE自动控制学报,59,1,223-227(2013)·Zbl 1360.93735号 ·doi:10.10109/TAC.2013.2270031
[11] 科斯塔,O.L.V。;弗拉戈索医学博士。;Marques,R.P.,离散时间马尔可夫跳跃线性系统(2006),Springer科学与商业媒体·Zbl 1081.93001号
[12] 科斯塔,O.L.V。;弗拉戈索医学博士。;Todorov,M.G.,基于检测器的部分信息马尔可夫跳变线性系统控制方法,IEEE自动控制汇刊,60,5,1219-1234(2015)·Zbl 1360.93761号 ·doi:10.1109/TAC.2014.2366253
[13] El Ghaoui,L。;Oustry,F。;AitRami,M.,静态输出反馈和相关问题的锥互补线性化算法,IEEE自动控制汇刊,42,8,1171-1176(1997)·Zbl 0887.93017号 ·数字对象标识代码:10.1109/9.618250
[14] 冯,J.-E。;Lam,J。;Shu,Z.,通过概率速率合成和输出反馈稳定马尔可夫系统,IEEE自动控制汇刊,55,3,773-777(2010)·Zbl 1368.93535号 ·doi:10.1109/TAC.2010.2040499
[15] Graham,A.,Kronecker乘积和矩阵微积分:应用(1981),霍尔斯特德出版社·Zbl 0497.26005号
[16] Hespanha,J.P.和Morse,A.S.(1999)。具有平均停留时间的切换系统的稳定性。第38届IEEE决策与控制会议记录(分类号99CH36304)(第3卷,第2655-2600页)。
[17] 纪毅。;Chizeck,H.J.,具有独立控制转移概率的跳跃线性系统的最优二次控制,国际控制杂志,49,2,481-491(1989)·Zbl 0677.93071号 ·网址:10.1080/00207178908559648
[18] Karan,M。;Shi,P。;Kaya,C.Y.,连续和离散时间马尔可夫跳跃线性系统随机稳定性鲁棒性的转移概率界,Automatica,42,121159-2168(2006)·Zbl 1104.93056号 ·doi:10.1016/j.automatica.2006.07.002
[19] Kordonis,I。;Papavassilopoulos,G.P.,关于具有一般状态空间的马尔可夫链的MJLS的稳定性和LQ控制,IEEE自动控制汇刊,59,2,535-540(2014)·Zbl 1360.93744号 ·doi:10.10109/TAC.2013.2274688
[20] Lian,J。;Li,S.,带输入约束的不确定正马尔可夫跳模糊系统的模糊控制,IEEE控制论汇刊,51,4,2032-2041(2021)·doi:10.10109/TCB.2019.22932898
[21] 利伯松,D。;赫斯帕尼亚,J.P。;莫尔斯,A.S.,《切换系统的稳定性:李代数条件》,《系统与控制快报》,37,3,117-122(1999)·Zbl 0948.93048号 ·doi:10.1016/S0167-6911(99)00012-2
[22] Lin,H。;Antsaklis,P.J.,切换线性系统的稳定性和可镇定性:最新结果综述,IEEE自动控制汇刊,54,2,308-322(2009)·Zbl 1367.93440号 ·doi:10.1109/TAC.2008.2012009
[23] 栾,X。;赵,S。;Liu,F.,具有不确定转移概率的离散马尔可夫跳跃系统的(####)控制,IEEE自动控制学报,58,6,1566-1572(2012)·Zbl 1369.93178号 ·doi:10.1109/TAC.2012.2229839
[24] Morais,C.F。;布拉加,M.F。;奥利维拉共和国。;Peres,P.L.,《不确定概率下MJLS的状态反馈控制》,Automatica,52,2,317-321(2015)·Zbl 1309.93147号 ·doi:10.1016/j.automatica.2014.12.013
[25] 宁,Z。;张,L。;A.梅斯巴。;Colaneri,P.,离散时间非齐次半马尔可夫跳跃线性系统的稳定性分析与镇定:多面体方法,Automatica,120,10,109080(2020)·Zbl 1448.93341号 ·doi:10.1016/j.automatica.2020.109080
[26] 沈,H。;李,F。;徐,S。;Sreeram,V.,奇异摄动半马尔可夫跳跃系统的慢状态变量反馈镇定,IEEE自动控制汇刊,63,8,2709-2714(2017)·Zbl 1423.93404号 ·doi:10.1109/TAC.2017.2774006
[27] 沈,M。;Park,J.H。;Ye,D.,控制具有一般转移概率的马尔可夫跳跃非线性系统的分离方法,IEEE控制论汇刊,46,9,2010-2018(2015)·doi:10.1010/TCYB.2015.24599717
[28] Shi,P。;Boukas,E.K.,(####)-具有参数不确定性的马尔可夫跳跃线性系统的控制,优化理论与应用杂志,95,11,75-99(1997)·Zbl 1026.93504号 ·doi:10.1023/A:1022683311870
[29] Shi,P。;Boukas,E.K。;Agarwal,R.K.,范数有界不确定性和未知延迟的马尔可夫跳变离散时间系统的控制,IEEE自动控制汇刊,44,11,2139-2144(1999)·兹比尔1078.93575 ·数字对象标识代码:10.1109/9.802932
[30] Shorten,R。;纳伦德拉,K.S。;Mason,O.,公共二次Lyapunov函数的结果,IEEE自动控制学报,48,1,110-113(2003)·Zbl 1364.93580号 ·doi:10.1109/TAC.2002.806661
[31] 宋,J。;牛,Y。;Lam,J。;Shu,Z.,马尔可夫跳跃系统输出反馈指数稳定的混合设计方法,IEEE自动控制汇刊,63,5,1404-1417(2018)·Zbl 1395.93571号 ·doi:10.1109/TAC.9
[32] 孙晓明(X.-M.)。;王,W。;刘,G.-P。;赵,J.,时变时滞线性切换系统的稳定性分析,IEEE系统汇刊,人与控制论,B部分(控制论),38,2,528-533(2008)·doi:10.1109/TSMCB.2007.912078
[33] 孙,Z。;Ge,S.S.,切换动力系统的稳定性理论(2011),Springer·Zbl 1298.93006号
[34] 王,G。;Xu,L.,随机切换马尔可夫跳跃系统的几乎必然稳定性和镇定,IEEE自动控制汇刊,67,3,1529-1536(2021)·Zbl 07560663号 ·doi:10.1109/TAC.2021.3069705
[35] 王,Z。;Ho,D.W。;刘,Y。;Liu,X.,一类非线性离散时滞随机系统的鲁棒控制,Automatica,45,3,684-691(2009)·Zbl 1166.93319号 ·doi:10.1016/j.automatica.2008.10.025
[36] 王,Z。;乔·H。;Burnham,K.J.,关于具有马尔可夫跳变参数的双线性不确定时滞随机系统的镇定,IEEE自动控制汇刊,47,4,640-646(2002)·Zbl 1364.93672号 ·doi:10.1109/9.995042
[37] Xiang,W。;Lam,J。;Shen,J.,驻留时间约束下切换正系统的稳定性分析和(####)增益表征,Automatica,85,11,1-8(2017)·Zbl 1375.93108号 ·doi:10.1016/j.automatica.2017.07.016
[38] 熊,J。;Lam,J.,具有不确定切换概率的马尔可夫跳跃系统的鲁棒控制,国际系统科学杂志,40,3,255-265(2009)·Zbl 1167.93335号 ·doi:10.1080/00207720802300347
[39] 熊,J。;Lam,J.等人。;高,H。;Ho,D.W.,关于切换概率不确定的马尔可夫跳跃系统的鲁棒镇定,Automatica,41,5,897-903(2005)·Zbl 1093.93026号 ·doi:10.1016/j.automatica.2004.12.001
[40] 薛,M。;Yan,H。;张,H。;沈,H。;Shi,P.,带丢包补偿的马尔可夫跳跃系统基于耗散的滤波器设计,Automatica,133,11,109843(2021)·Zbl 1480.93430号 ·doi:10.1016/j.automatica.2021.109843
[41] 翟,G。;胡,B。;Yasuda,K。;Michel,A.N.,《具有稳定和不稳定子系统的切换系统的稳定性分析:平均停留时间方法》,《国际系统科学杂志》,32,8,1055-1061(2001)·Zbl 1022.93043号 ·doi:10.1080/00207720116692
[42] 张,L。;Boukas,E.K.,转移概率部分未知的马尔可夫跳跃线性系统的稳定性和镇定,Automatica,45,2,463-468(2009)·Zbl 1158.93414号 ·doi:10.1016/j.automatica.2008.010
[43] 张,L。;Lam,J.,分析和综合具有不完全转移描述的马尔可夫跳变线性系统的必要和充分条件,IEEE自动控制汇刊,55,7,1695-1701(2010)·Zbl 1368.93782号 ·doi:10.1109/TAC.2010.2046607
[44] X.赵。;尹,S。;李,H。;Niu,B.,一类慢切换系统的切换稳定性,IEEE自动控制汇刊,60,1,221-226(2014)·Zbl 1360.93584号 ·doi:10.1109/TAC.2014.2322961
[45] 朱,J。;Wang,L。;Spiryagin,M.,易失效制造过程中一类马尔可夫跳跃系统的控制与决策策略,IET控制理论与应用,6,12,1803-1811(2012)·doi:10.1049/iet-cta.2011.0302
[46] 朱,J。;Xia,K。;凌,Q。;Chen,W。;Dullerud,G.E.,通过模式反馈控制实现离散时间马尔可夫跳跃线性系统的稳定和优化,IEEE自动控制汇刊(2022)·Zbl 07742147号 ·doi:10.1109/TAC.2021.3131547
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配,可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。