状态与状态转移 第年健成 状态概率a,(n)=P(Xn=i), 第年疾肩 i=1,2,n=0,1,… 转移概率p=P(X1=Xn=),i,j=1,2,n=0,1… 月，=08P2=1-A,=02 0.8 0.2 0.3 2,=072=1-,=03 0.7 X+1只取决于Xw和P,与Xn,无关 状态转移具 a,(n+1)=a,(n)p1+a2(n)p2 有无后效性 a2(n+1)=a(n)p2+a2(n)p22 教学建摸转移概率pi j = P(Xn+1 = j Xn = i), i, j =1,2, n = 0,1,  Xn+1只取决于Xn和pij, 与Xn-1 , …无关 p11 = 0.8 1 0.2 p12 = − p11 = 0.7 p21 = 1 0.3 p22 = − p21 =    = 第 年疾病 第 年健康 状态 n n Xn 2, 1, 1,2, 0,1, ( ) ( ), = = = = i n a n P X i 状态概率 i n 状态与状态转移 状态转移具 有无后效性 1 1 11 2 21 a (n+1) = a (n)p +a (n)p 1 2 0.8 0.2 0.3 0.7 2 1 12 2 22 a (n+1) = a (n)p + a (n)p