马尔可夫链 状态O,=1,2 t时刻的状态(t) ·长度为T的离散时间上的状态序列 {∞(1),(2),…,(T)} 例如:u={u1,c4,u2,u2,u1,u4} 转移概率(矩阵) a11a12a13 aj=P(o(t+1)=alot)=o) a a 21a2a23 a a为从状态O到O,的转移概率马尔可夫链 • 状态 • t时刻的状态 • 长度为T的离散时间上的状态序列 例如： • 转移概率（矩阵） 为从状态 到 的转移概率 , 1, 2, i  i = i  j