数在 当Markov链的状态为有限时，称为有限链， 否则称为 1951 无限链.但无论状态有限还是无限，我们都可以将P(亿，j∈ S)排成一个矩阵的形式，令 P00P01P02··· P=(p)= P10P11P12·· (7.1.2) 7/71 P20P21P22··· 称P为转移概率矩阵，一般简称为转移矩阵.由于概率是非 负的，且过程必须转移到某个状态，所以容易看出P(i,j∈ S)有性质 (1)p≥0，i,j∈S; (7.1.3) (2)∑jcsp=1,i∈S. GoBack FullScreen Close Quit7/71 kJ Ik J I GoBack FullScreen Close Quit MarkovÛGèkÅûß°èkÅÛ߃K°è ÃÅÛ.ÃÿGkÅÑ¥ÃÅß·Ç—å±Úpij(i, j ∈ S)¸§òá› /™ß- P = (pij) =   p00 p01 p02 · · · p10 p11 p12 · · · p20 p21 p22 · · · ... ... ... ...   (7.1.2) °Pè=£V«› ß òÑ{°è=£› .duV«¥ö KßÖLß7L=£,áGߧ±N¥w—pij(i, j ∈ S)k5ü (1) pij ≥ 0, i, j ∈ S; (2) P j∈S pij = 1, ∀i ∈ S. (7.1.3)