中科院研究生院2004~2005第一学期随机过程讲稿孙应飞 P1+=P (1≤i≤a-1) P1=q=1-p(1≤isa-1) P2=0 l;1 P P P=0G≠0) P ≠a (4)带有一个反射壁的随机游动: 特点:一旦质点进入零状态,下一步它以概率p向右移动一 格,以概率q=1-p停留在零状态。 此时的状态空间为S={0,1,2,},它的一步转移概率为: P ii+l P (i≥1) P11=q=1-P(≥1) P1=0 Po =p P p-q po,=0(≠0,1) (5)带有二个反射壁的随机游动: 此时的状态空间为S={012.…,a},它的一步转移概率矩阵为: 000 0 0 qg000 P0g p00 00000 0 000 0 0 0 0 0000 0000 0 即有:中科院研究生院 2004～2005 第一学期 随机过程讲稿 孙应飞 0 ( ) 0 ( 0) 1 1 0 ( 1, 1;1 1) 1 (1 1) (1 1) 0 00 1 1 p j a p j p p p j i i i a p q p i a p p i a a j j a a i j i i i i =  =  = = =  + −   − = = −   − =   − − + （4） 带有一个反射壁的随机游动： 特点：一旦质点进入零状态，下一步它以概率 p 向右移动一 格，以概率 q =1− p 停留在零状态。 此时的状态空间为 S ={0,1,2, } ，它的一步转移概率为： 0 ( 0,1) 1 0 ( 1, 1; 1) 1 ( 1) ( 1) 0 00 01 1 1 =  = − = = =  + −  = = −  =  − + p j p p q p p p j i i i p q p i p p i j i j i i i i （5） 带有二个反射壁的随机游动： 此时的状态空间为 S ={0,1,2,  ,a} ，它的一步转移概率矩阵为： ( 1) ( 1) 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 +  +                     = a a q p q p q p q p q p P        即有：