当Markov链的状态为有限时，称为有限链， 否则称为 无限链.但无论状态有限还是无限，我们都可以将p(亿，j∈ S)排成一个矩阵的形式，令 P00P01P02··: P=(pij)= P10P11P12··· (5.1.2) P20P21P22· 6/113 称P为转移概率矩阵，一般简称为转移矩阵.由于概率是非 负的，且过程必须转移到某个状态，所以容易看出P(⑦，j∈ S)有性质 (1)pi≥0，i,j∈S; (5.1.3) (2)∑jesP=1,i∈S. GoBack FullScreen Close Quit6/113 kJ Ik J I GoBack FullScreen Close Quit MarkovÛGèkÅûß°èkÅÛ߃K°è ÃÅÛ.ÃÿGkÅÑ¥ÃÅß·Ç—å±Úpij(i, j ∈ S)¸§òá› /™ß- P = (pij) =   p00 p01 p02 · · · p10 p11 p12 · · · p20 p21 p22 · · · ... ... ... ...   (5.1.2) °Pè=£V«› ß òÑ{°è=£› .duV«¥ö KßÖLß7L=£,áGߧ±N¥w—pij(i, j ∈ S)k5ü (1) pij ≥ 0, i, j ∈ S; (2) P j∈S pij = 1, ∀i ∈ S. (5.1.3)