具有无限马尔可夫切换的离散时间随机系统的最大值解、最小半正定解与稳定解的研究
The Maximal, Minimal Positive Semidefinite and Stabilizing Solutions for Discrete-Time Stochastic Systems with Infinite Markov Switching
摘要: 本文主要研究具有无限马尔可夫切换的离散时间随机系统的最值解与稳定解。在研究具有有限马尔可夫切换的离散时间随机系统的最值解与稳定解的基础上推广到无限马尔可夫,为研究系统稳定性奠定了良好的理论基础。文章首先介绍了稳定解,最大值解与半正定最小值解的概念,并利用算子理论和随机分析等方法得出系统随机稳定能够等价于相应的正算子序列是稳定的;其次,在系统所对应的Riccati方程解集非空的前提下,若Riccati方程有稳定解,则必定存在最大值解;再次,添加系统随机可探测条件,系统能够存在最小半正定解,若考虑存在唯一稳定解,则系统的最大值解等于系统的稳定解也等于系统的最小半正定解;最后,用数值举例来验证定理的正确性和有效性。
Abstract: In this paper, we study the maximal, minimal positive semidefinite and stabilizing solutions of dis-crete-time stochastic systems with infinite Markov switching. On the basis of studying the optimal solution and stable solution of discrete time stochastic system with finite Markov switching, it is ex-tended to infinite Markov, which lays a good theoretical foundation for the study of system stability. Firstly, the concepts of stabilizing solution, maximal solution and minimal positive semidefinite so-lution are introduced. By using operator theory and stochastic analysis methods, it is shown that the stochastic stability of the system is equivalent to that the corresponding sequence of positive operators is stable. Secondly, on the premise that the solution set of the corresponding Riccati equation is non-empty, if there is a stabilizing solution to the Riccati equation, there must be a maximal solution. Thirdly, under the condition that the system is stochastic detectability, the min-imal positive semidefinite solution can exist. If the unique stable solution is considered, the maxi-mal solution of the system is equal to the stabilizing solution and the minimal positive semidefinite solution. Finally, an example is given to verify its correctness and validity.
文章引用:赵红霞, 何鑫, 贾亚琪, 张春梅, 叶志勇. 具有无限马尔可夫切换的离散时间随机系统的最大值解、最小半正定解与稳定解的研究[J]. 应用数学进展, 2023, 12(4): 1382-1390. https://doi.org/10.12677/AAM.2023.124141

1. 引言

离散时间Markov跳变线性系统在通信工程、机器人技术等领域应用广泛 [1] [2] 。1960年,Kalnan [3] 在控制理论中基于可控制性与可观测性研究,发现矩阵Riccati方程存在全局解。1969年,Sworde D D [4] 将随机最大值原理引入到具有Markov跳变参数混合系统的最优控制问题中,为研究具有Markov跳变参数混合系统的最大值解的相关问题奠定了基础。文献 [5] 首次研究了Markov跳变线性系统的线性二次调节器(linear quadratic regulator, LQR)问题,也就是使得二次耗散函数最小化的最优控制问题,将具有无限马尔可夫切换的离散时间随机系统解的问题转化为相应的Riccati方程解的问题。1969年到1980年期间,2014年Meng Q [6] 和Mahmoud M S [7] 等人在对有限时间LQR问题进行研究时应用了较为有名的最大值原理。2012年Ungureanu 与Dragan [8] 在研究Markov跳变线性系统时介绍了具有无限离散时间Markov切换线性系统的可观测与随机可探测的相关概念以及该系统相关的稳定性研究,为本文的写作奠定了坚实的理论基础。文献 [9] [10] [11] 中,Damm在相关随机控制中通过对偶方程给出了离散时间Riccati方程的一些相关性质。随后,Wonham [12] [13] 将这一结果推广到随机控制框架中,并且引入了随机控制的Riccati方程,使得具有无限马尔可夫切换的离散时间随机系统的解的相关研究转化为对应的广义Riccati方程解的研究。文献 [14] 考虑了一类定义在序Hilbert空间上的离散时间正向线性方程与后向线性方程,提供了所考虑方程具有特殊解的充要条件,涉及到该方程的最大值解,稳定解与最小半正定解。文献 [15] 研究具有无限马尔可夫切换的离散时间随机系统的稳定解最大值解与最小值解的相关问题,本文就是在文献 [15] 的相关研究中又进行更深层次的研究,使得系统的稳定解、最大值解与最小半正定解之间建立联系,使得系统的最大值解与最小半正定解更加逼近系统的稳定解,为研究系统的稳定性开辟了新的方向。

文献 [16] 系统的研究了具有有限马尔可夫切换的离散时间随机系统的稳定解等相关问题,使得稳定性的研究成为当下研究的热点问题。本文正是在文献 [16] 的启发下进行具有无限马尔可夫切换的离散时间随机系统的稳定解等问题的研究。文献 [17] [18] 研究了Riccati方程的半正定解。本文也在文献 [17] [18] 的基础上引入了系统的随机可检测性,基于系统的随机可检测性条件,能够使得系统的半正定解为该系统的一个稳定解。文献 [19] [20] [21] [22] [23] [24] 中V. Dragan和T. Morozan在研究中强调随机线性系统解的唯一性,在相关条件的限制下使得系统具有唯一稳定解;在添加系统随机可检测性条件下,离散时间随机线性微分方程最多只有一个半正定解。

本文主要分为五个部分,第一部分时引言部分,主要介绍了相关的研究成果与研究现状;第二部分为符号说明部分,对文章中应用到的符号进行说明,使得读者更加容易理解文章中的理论部分;第三部分为系统描述部分,对文章中所要研究的系统进行详细的描述,并且介绍相关的概念与定义;第四部分为主要结果部分,定理1与定理2进行了详细的证明过程,定理1应用Lyapunov算子将系统(1)是随机稳定与线性正算子序列 { Π ( t ) } t 的稳定联系起来,为定理2的成立奠定了基础。定理2进行简单的计算可以得出若集合 Γ Σ 是非空的,则若Riccati方程有稳定解,则必定存在最大值解。以上定理的成立使得引理2的结论成立。第五部分为数值举例,通过数值举例来验证结果的正确性。

2. 符号说明

R m × n 代表所有 m × n 阶实矩阵空间,且该空间的内积定义如下:

A , B = T r [ B T A ]

对于任意的 A , B R m × n T r [ M ] 代表矩阵M的迹; S n = S n S n S n ;对于一个固定的整数 N 1 M n m = R m × n R m × n R m × n 。因此若 B M n m ,则当且仅当 B = ( B ( 1 ) , B ( 2 ) , , B ( N ) , ) ,其中 B ( i ) R m × n i ( 1 , 2 , , N , ) 。当 m = n 时,一般用 M n 来代替 M n n 。显然 S n M n M n n 是一个Hilbert空间,且该Hilbert空间上的内积满足:

X , Y = I = 1 T r [ Y T ( i ) X ( i ) ]

对于所有 X = ( X ( 1 ) , X ( 2 ) , , X ( N ) , ) Y = ( Y ( 1 ) , Y ( 2 ) , , Y ( N ) , ) ,其中 X ( i ) R m × n Y ( i ) R m × n X M n Y M n ;若 C = ( C ( 1 ) , C ( 2 ) , , C ( N ) , ) M n m ,则 C T M m n ,且 ( C ( i ) ) T = C T ( i ) ,所以 C T = ( C T ( 1 ) , C T ( 2 ) , , C T ( N ) , ) V ( S n , S n + m ) 定义一个线性算子集 Π : S n S n + m l ( , S n ) 代表有界序列 X = { X ( t ) } t S n

3. 系统描述

考虑系统:

x ( t + 1 ) = [ A 0 ( t , η t ) + k = 1 r A k ( t , η t ) ω k ( t ) ] x ( t ) + [ B 0 ( t , η t ) + k = 1 r B k ( t , η t ) ω k ( t ) ] u ( t ) (1)

y ( t ) = C ( t , η t ) x ( t ) + D ( t , η t ) u ( t )

上述具有马尔可夫切换的离散时间线性系统相关的耦合离散时间Riccati方程如:

X ( t , i ) = k = 0 r j = 1 N p t ( i , j ) A k T ( t , η t ) X ( t + 1 , j ) A k ( t , η t ) + C T ( t , η t ) C ( t , η t ) ( k = 0 r j = 1 N p t ( i , j ) A k T ( t , η t ) X ( t + 1 , j ) B k ( t , η t ) + C T ( t , η t ) D ( t , η t ) ) × ( k = 0 r j = 1 N p t ( i , j ) B k T ( t , η t ) X ( t + 1 , j ) B k ( t , η t ) + D T ( t , η t ) D ( t , η t ) ) 1 × ( k = 0 r j = 1 N p t ( i , j ) A k T ( t , η t ) X ( t + 1 , j ) B k ( t , η t ) + C T ( t , η t ) D ( t , η t ) ) T (2)

定义1 [17] 耦合离散时间Riccati方程(2)与系统(1)所描述的优化问题有关,对应的二次耗散函数为:

J ( t 0 , x 0 , u ) = t = 0 E [ ( x u T ( t ) u T ( t ) ) ( M ( t , η t ) L ( t , η t ) L T ( t , η t ) R ( t , η t ) ) ( x u ( t ) u ( u ) ) ] (3)

定义一个线性算子: X Ξ ( t , X ) : S n S n ,其中:

Ξ i ( t , X ) S n Ξ ( t , X ) = ( Ξ 1 ( t , X ) , Ξ 2 ( t , X ) , , Ξ N ( t , X ) , )

Ξ i ( t , X ) = j = 1 N p t ( i , j ) X ( j ) (4)

显然,对于任意t, Ξ ( t , ) S n 上正的线性算子。

取定方程(2)中 M ( t , η t ) = C T ( t , η t ) C ( t , η t ) L ( t , η t ) = C T ( t , η t ) D ( t , η t ) R ( t , η t ) = D T ( t , η t ) D ( t , η t ) ,且有:

Π 1 ( t ) X = k = 1 r A k T ( t , i ) Ξ i ( t , X ) A k ( t , i ) Π 2 ( t ) X = k = 1 r A k T ( t , i ) Ξ i ( t , X ) B k ( t , i ) Π 3 ( t ) X = k = 1 r B k T ( t , i ) Ξ i ( t , X ) B k ( t , i ) (5)

在上述(5)式的定义下,(2)式可化为:

X ( t , i ) = Π 1 ( t ) X ( t + 1 ) + M ( t , η t ) ( Π 2 ( t ) X ( t + 1 ) + L ( t , η t ) ) × ( Π 3 ( t ) X ( t + 1 ) + R ( t , η t ) ) 1 ( Π 2 ( t ) X ( t + 1 ) + L ( t , η t ) ) T (6)

对于任意的 t ( t 0 , ) ,记 = ( t 0 , ) M ( t , η t ) S n Π 1 ( t ) : S n S n L ( t , η t ) M n m Π 1 ( t ) : S n M n m R ( t , η t ) S m Π 3 ( t ) : S n S m 都是线性算子,其中 n , m 都是固定的正整数。

Π ( t ) X = ( Π 1 ( t ) X Π 2 ( t ) X ( Π 2 ( t ) X ) T Π 3 ( t ) X ) Q ( t , η t ) = ( M ( t , η t ) L ( t , η t ) L T ( t , η t ) R ( t , η t ) )

为了后续研究,我们做出如下假设:

假设1:1) 序列 { Π ( t ) } t V ( S n , S n + m ) 与序列 { Q ( t ) } t t 0 S n + m 都是有界序列;

2) 对于任意的 t t 0 Π ( t ) 是一个正算子,即: Π ( t ) X 0 ,若 X 0

取定下列两个集合:

Γ Σ = { X = { X ( t ) } t l ( , S n ) | D Σ ( X ( t ) ) 0 , Π 3 ( t ) X ( t + 1 ) + R ( t , η t ) 0 , t } (7)

Γ ˜ Σ = { X = { X ( t ) } t l ( , S n ) | D Σ ( X ( t ) ) 0 , t } (8)

其中,对于任意的 t

D Σ ( X ( t ) ) = ( X 0 0 0 ) + ( Π 1 ( t ) X Π 2 ( t ) X ( Π 2 ( t ) X ) T Π 3 ( t ) X ) + ( M ( t , η t ) L ( t , η t ) L T ( t , η t ) R ( t , η t ) )

注记1:对于任意的一个序列 { X ( t ) } t X ( t ) 0 , t 等价于 X ( t , i ) ε I n 0 对于任意的 t , 1 t ,这样的序列被称为一致正的。

注记2:根据舒尔补方法可知, Γ Σ 包含方程(6)的所有全局有界解 { X ( t ) } t ,且满足: Π 3 ( t ) X ( t + 1 ) + R ( t , η t ) 0 , t I

注记3:由(7)式和(8)式显然可得: Γ ˜ Σ Γ Σ

定义2 [15] :我们称 { X ( t ) } t 是方程(6)的一个最大解,若 X ( t ) X ^ ( t ) , t ,对于任意的 { X ( t ) } t Γ Σ

定义3 [15] :我们称 { X s ( t ) } t S n 是方程(6)的一个稳定解,若离散时间线性方程 Z ( t + 1 ) = Π F X s * ( t ) Z ( t ) 是指数稳定的,其中:

F X s ( t ) = ( Π 3 ( t ) X s ( t + 1 ) + R ( t , η t ) ) 1 × ( Π 2 ( t ) X s ( t + 1 ) + L ( t , η t ) ) T (9)

Π F X s * ( t ) = ( I n ( F X s ( t ) ) T ) ( Π 1 ( t ) X Π 2 ( t ) X ( Π 2 ( t ) X ) T Π 3 ( t ) X ) ( I n F X s ( t ) ) (10)

定义4 [15] :我们称线性正算子序列 { Π ( t ) } t 是稳定的,若存在有界序列 { F ( t , i ) } t R m × n , 1 i < 使得离散时间线性方程 Z ( t + 1 ) = ( Π F ( t ) ) * Z ( t ) 的零态平衡是指数稳定的。

定义5 [22] :我们称离散时间系统广义Riccati方程(6)的解 { X min ( t ) } t 是其半正定解中最小的,若 0 X min ( t ) X ( t ) ,对于离散时间系统广义Riccati方程(6)的任意解 { X ( t ) } t S n N +

定义6 [22] :我们称系统(1)是随机稳定的,若存在一个有界序列 { F ( t , i ) } t R m × n , 1 i < 使得闭环系统

x ( t + 1 ) = [ A 0 ( t , η t ) + k = 1 r A k ( t , η t ) ω k ( t ) + B 0 ( t , η t ) F ( t , η t ) + k = 1 r B k ( t , η t ) F ( t , η t ) ω k ( t ) ] x ( t ) (11)

的零态稳定是强指数均方稳定的(Strongly exponentially stable in the mean square)。

显然,根据定义3和定义4可知,若线性正算子序列 { Π ( t ) } t 是稳定的,则方程(6)有一个稳定解 { X ( t ) } t S n

定义7 [22] :离散时间无限马尔可夫跳跃系统(1)中,取 u ( t ) = 0 ,我们称系统是随机可探测的,若存在序列 H H n × m 使得系统 ( A + H C ; P ) 是随机稳定的。

4. 主要成果

定理1 系统(1)是随机稳定的等价于线性正算子序列 { Π ( t ) } t 是稳定的。

证明:根据定义5可知,若系统(1)是随机稳定的,则闭环系统(11)的零态稳定是强指数均方稳定的,即对应的Lyapunov型算子

ϒ F ( t ) X ( i ) = k = 0 r j = 1 N p t ( j , i ) [ A k ( t , j ) + B k ( t , j ) F ( t , i ) ] X ( t + 1 , j ) ( [ A k ( t , j ) + B k ( t , j ) F ( t , i ) ] ) T (12)

能够产生一个指数稳定演化。若线性正算子序列 { Π ( t ) } t 是稳定的,则存在有界序列 { F ( t , i ) } t R m × n , 1 i < 使得离散时间线性方程 Z ( t + 1 ) = ( Π F ( t ) ) * Z ( t ) 的零态平衡是指数稳定的,即 ( Π F ( t ) ) * 能够产生一个指数稳定演化。又由于

Π F ( t ) = ( I n ( F ( t , i ) ) T ) ( Π 1 ( t ) X Π 2 ( t ) X ( Π 2 ( t ) X ) T Π 3 ( t ) X ) ( I n F ( t , i ) ) (13)

经过简单的计算可得: Π F ( t ) = ( ϒ F ( t ) ) * 。根据定理2.5 [15] 可知,若 ( ϒ F ( t ) ) * 能够产生一个指数稳定演化,则 ϒ F ( t ) 能够产生一个指数稳定演化。综上可知:系统(1)是随机稳定的等价于线性正算子序列 { Π ( t ) } t 是稳定的。

引理1 [8] :假设正算子序列 { Π ( t ) } t I B ( S n N , S n + m N ) 是稳定的且 0 Γ Σ ,在此条件下由 Σ = ( Π , Q ) 定义的离散时间系统广义Riccati方程(6)有两个全局有界解 { X min ( t ) } t { X max ( t ) } t 具有以下性质:

0 X min ( t ) X ( t ) X max ( t ) , t

对于方程(6)任意的有界解 { X ( t ) } t X ( t ) 0 , t

引理2 [8] :若 Γ Σ 是非空的,则方程(6)至少还有一个稳定解。

定理2:若集合 Γ Σ 是非空的,则若Riccati方程有稳定解,则必定存在最大值解。

证明:令 X ^ = { X ^ ( t ) } t 是集合 Γ Σ 中的任意一个序列,即 X ^ = { X ^ ( t ) } t 是方程(6)的任意一个解,根据文献 [15] 中的引理5.1可知,若取定 W ( t ) = F S ( t ) ,则方程(6)可以通过简单的计算可以转化为:

X ^ ( t ) = Π F S ( t ) X ^ ( t + 1 ) + Q F S ( t ) M ^ ( t ) ( F S ( t ) F ^ ( t ) ) T ( Π 3 ( t ) X ^ ( t + 1 ) + R ( t , η t ) ) ( F S ( t ) F ^ ( t ) ) (14)

其中 F ^ ( t ) = ( Π 3 ( t ) X ^ ( t + 1 ) + R ( t , η t ) ) 1 ( Π 2 ( t ) X ^ ( t + 1 ) + L ( t , η t ) ) T

设方程(6)有一个稳定解,取该稳定解为 X s = { X s ( t ) } t ,则离散时间线性方程 X s ( t + 1 ) = Π F X s * ( t ) X s ( t ) 是指数稳定的,其中 Π F X s * ( t ) F X s ( t ) 如(9)和(10)式所示。由于 X s ( t ) 也是方程(6)的一个解,故当 W ( t ) = F X s ( t ) 时,通过简单的计算可得:

X s ( t ) = Π F S ( t ) X s ( t + 1 ) + Q F S ( t ) (15)

用(15)式减去(14)式可得:

X s ( t ) X ^ ( t ) = Π F S ( t ) ( X s ( t + 1 ) X ^ ( t + 1 ) ) + ( F S ( t ) F ^ ( t ) ) T ( Π 3 ( t ) X ^ ( t + 1 ) + R ( t , η t ) ) ( F S ( t ) F ^ ( t ) ) + M ^ ( t ) (16)

根据文献 [15] 中引理1可知, M ^ ( t ) 0 ,由于 X ^ ( t + 1 ) Γ Σ ,则有 Π 3 ( t ) X ^ ( t + 1 ) + R ( t , η t ) 0 ,故 ( F S ( t ) F ^ ( t ) ) T ( Π 3 ( t ) X ^ ( t + 1 ) + R ( t , η t ) ) ( F S ( t ) F ^ ( t ) ) 0 。又由于 X s = { X s ( t ) } t 是一个稳定解,则离散时间线性方程 X s ( t + 1 ) = Π F X s * ( t ) X s ( t ) 是指数稳定的,再根据定理2.5 [15] 可知, Π F S ( t ) 能产生一个指数稳定演化,且 G ( t ) 0 ,其中 G ( t ) = ( F S ( t ) F ^ ( t ) ) T ( Π 3 ( t ) X ^ ( t + 1 ) + R ( t , η t ) ) ( F S ( t ) F ^ ( t ) ) + M ^ ( t ) ,故方程(16)有唯一有界一致正解,即 X s ( t ) X ^ ( t ) 0 ,由于 X ^ = { X ^ ( t ) } t 是方程(6)的任意一个解,且 X s ( t ) X ^ ( t ) ,根据定义2可知, X s ( t ) 即为方程(6)的一个最大值解。故定理得证。

推论1:在系统随机可探测条件下,离散时间系统广义Riccati差分方程(1)~(2)的所有半正定解都是它的稳定解。若该稳定解是唯一的,则方程(1)~(2)的最多只有一个半正定解 X s ( t ) ,且有 X s ( t ) = X min ( t ) = X max ( t ) , t

5. 数值举例

该数值举例说明,在系统不可随机可测的情况下,离散时间系统广义Riccati差分方程(2)的最大值解与最小值解不一致。

考虑方程(2)的特殊情形, n = 2 , r = 1 , i = 1 ,则方程化为:

X ( t ) = A 0 T X ( t + 1 ) A 0 + A 1 T X ( t + 1 ) A 1 + C T C ( A 0 T X ( t + 1 ) B 0 + A 1 T X ( t + 1 ) B 1 + C T D ) × ( D T D + B 0 T X ( t + 1 ) B 0 + B 1 T X ( t + 1 ) B 1 ) 1 ( B 0 T X ( t + 1 ) A 0 + B 1 T X ( t + 1 ) A 1 + D T C ) (17)

其中:

A 0 = ( 4 5 0 0 8 5 ) ; A 1 = ( 3 5 0 0 3 5 ) = 3 5 I 2 ; B 0 = ( 2 1 ) T ; B 1 = ( 0 0 ) T ; C = ( 4 5 0 0 0 ) ; D = ( 0 1 ) T

通过简单的计算可知,系统不是随机可测的。取 X s = ( 7 + 2 2 3 ( 3 + 2 ) 3 ( 3 + 2 ) 3 ( 11 + 6 2 ) )

显然 X s 是(17)式的一个解。接下来证明 X s 是(17)式的一个稳定解。

根据定理3.7 [15] 可知,若 X s 是(17)式的一个稳定解,当且仅当存在 X ˜ > 0 ,使得 A ˜ T X ˜ A ˜ + 25 9 X ˜ X ˜ < 0 ,其中:

A ˜ = ( 4 2 5 12 5 ( 7 6 2 ) 2 5 ( 1 + 2 ) 2 5 ( 7 6 2 ) )

则上述不等式等价于 A ^ T X ˜ A ^ X ˜ < 0 ,其中 A ^ = 5 4 A ˜ ,通过著名的离散时间Lyapunov定理并且进行简单地计算可知其等价于 ρ ( A ^ ) < 1 ,因此可以推断出 X s 是(17)式的一个稳定解。又因为 0 Γ Σ ,则根据定理1可知若 Γ Σ 非空,若方程有稳定解则必有最大值解,且其稳定值与最大值一致。即 X s = X max 。通过直接的计算,可知(17)式具有两个半正定解,即 X s X ^ ,其中

X ^ = ( 1 + 2 2 0 0 0 )

因为 X s X ^ ,则 X ^ 是(17)式的最小解。因此在在系统不是随机可测时,离散时间系统广义Riccati方程(2)的最大值解与最小值解不一致。

6. 结论

本文主要应用Lyapunov算子将系统 随机稳定与线性正算子序列 { Π ( t ) } t 的稳定联系起来,并且对其进行了明确的证明,为定理2的成立奠定了基础。定理2进行直接的计算可以得出若集合 Γ Σ 是非空的,则若Riccati方程有稳定解,则必定存在最大值解。

基金项目

重庆理工大学研究生教育高质量发展项目,项目编号:gzlcx20223309,项目类型:校级联合资助项目。

参考文献

[1] Stoica, A. and Yaesh, I. (2002) Jump Markovian-Based Control of Wing Deployment for an Uncrewed Air Vehicle. Journal of Guidance, 25, 407-411.
https://doi.org/10.2514/2.4896
[2] Hu, S.-H., Fang, Y.-W., Xiao, B.-S., Wu, Y.-L. and Mou, D. (2010) Near Space Hypersonic Vehicle Longitudinal Motion Control Based on Markov Jump System Theory. 2010 8th World Congress on Intelligent Control and Automation, Jinan, 7-9 July 2010, 7067-7072.
[3] Kal-man, R. (1960) Contribution on the Theory of Optimal Control. Boletín de la Sociedad Matemática Mexicana, 5, 102-119.
[4] Sworde, D. (1969) Feedback Control of a Class of Linear Systems with Jump Parameters. IEEE Transactions on Automatic Control, 14, 9-14.
https://doi.org/10.1109/TAC.1969.1099088
[5] Krasovskii, N.N. and Lidskii, E.A. (1961) Analytical Design of Controllers in Systems with Random Attributes. Automation and Remote Control, 22, 1021-2025.
[6] Meng, Q. (2014) Linear Quadratic Optimal Stochastic Control Problem Driven by a Brownian Motion and a Poisson Random Martingale Measure with Random Cofficients. Stochastic Analysis and Appli-cations, 32, 88-109.
https://doi.org/10.1080/07362994.2013.845106
[7] Mahmoud, M.S. and Peng, S. (2009) Robust Control for Markovian Jump Linear Discrete-Time Systems with Unknown Nonlinearities. IEEE Transactions on Circuits and Sys-tems I: Fundamental Theory and Applications, 49, 538-542.
https://doi.org/10.1109/81.995674
[8] Ungureanu, V.M. and Dragan, V. (2013) Stability of Discrete-Time Positive Evolution Operators on Ordered Banach Spaces and Applications. Journal of Difference Equations and Applications, 19, 952-980.
https://doi.org/10.1080/10236198.2012.704369
[9] Damm, T. (2004) Rational Matrix Equations in Stochastic Control. In: Lecture Notes in Control and Information Sciences, Vol. 297, Springer, Berlin.
[10] Damm, T. and Hin-richsen, D. (2001) Newton’s Method for a Rational Matrix Equation Occurring in Stochastic Control. Linear Algebra and Its Applications, 332-334, 81-109.
https://doi.org/10.1016/S0024-3795(00)00144-0
[11] Damm, T. and Hin-richsen, D. (2003) Newton’s Method for Concave Operators with Resolvent Positive Derivatives in Ordered Banach Spaces. Linear Algebra and Its Applications, 363, 43-64.
https://doi.org/10.1016/S0024-3795(02)00328-2
[12] Wonham, W.M. (1968) On a Matrix Riccati Equation of Stochastic Control. SIAM Journal on Control, 6, 681-697.
https://doi.org/10.1137/0306044
[13] Wonham, W.M. (1970) Random Differential Equations in Control Theory. In Bharucha-Reid, A.T., Eds., Probabilistic Methods in Applied Mathematics, Vol. 2, Academic Press, New York/London.
[14] Costa, E.F. and do Val, JB.R. (2001) On the Detectability and Observability of Discrete-Time Markov Jump Linear Systems. Systems & Control Letters, 44, 135-145.
https://doi.org/10.1016/S0167-6911(01)00134-7
[15] Dragan, V., Morozan, T. and Stoica, A.M. (2010) Mathe-matical Methods in Robust Control of Discrete-Time Linear Stochastic Systems. Springer, New York.
https://doi.org/10.1007/978-1-4419-0630-4
[16] Costa, O.L.V., Marques, R.P. and Fragoso, M.D. (2005) Dis-crete-Time Markov Jump Linear Systemms. Springer, New York.
[17] Morozan, T. (1992) Discrete-Time Riccati Equations Connected with Quadratic Control for Linear Systems with Independent Random Perturbations. Revue Rou-maine de Mathématique Pures et Appliquées, 37, 233-246.
[18] Morozan, T. (1995) Stability and Control for Linear Discrete-Time Systems with Markov Perturbations. Revue Roumaine de Mathématique Pures et Appliquées, 40, 471-494.
[19] Dragan, V., Damm, T., Freiling, G. and Morozan, T. (2005) Differential Equations with Positive Evolu-tions and Some Applications. Results in Mathematics, 48, 206-235.
https://doi.org/10.1007/BF03323366
[20] Dragan, V. and Morozan, T. (2006) Exponential Stability for Discrete Time Linear Equations Defined by Positive Operators. Integral Equations and Operator Theory, 54, 465-493.
https://doi.org/10.1007/s00020-005-1371-7
[21] Dragan, V. and Morozan, T. (2006) Observability and Detectabil-ity of a Class of Discrete-Time Stochastic Linear Systems. IMA Journal of Mathematical Control and Information, 23, 371-394.
https://doi.org/10.1093/imamci/dni064
[22] Dragan, V., Morozan, T. and Stoica, A.-M. (2006) Mathe-matical Methods in Robust Control of Linear Stochastic Systems. In: Miele, A., Ed., Mathematical Concepts and Meth-ods in Science and Engineering, Vol. 50, Springer, New York.
[23] Dragan, V. and Morozan, T. (2006) Mean Square Exponential Stability for Discrete-Time Time-Varying Linear Systems with Markovian Switching. Proceedings of the 17th International Symposium on Mathematical Theory of Networks and Systems, Kyoto, 24-28 July 2006.
[24] Dragan, V. and Morozan, T. (2006) Mean Square Exponential Stability for some Stochastic Linear Dis-crete Time Systems. European Journal of Control, 12, 373-395.
https://doi.org/10.3166/ejc.12.373-395