第二节离散信源的信息熵 例:天气预报,有两个信源 X p(x)」1/4,3/4Lp(x)」1/2,1/2 H(x1)=log4+-log=0.809 H(X,=log 2+log2=1 2 说明第二个信源的平均不确定性更大一些例：天气预报，有两个信源 1 1, 2 ( ) 1/ 4, 3/ 4 X a a p x       =       2 1, 2 ( ) 1/ 2, 1/ 2 X a a p x       =       1 1 3 4 ( ) log 4 log 0.809 4 4 3 H X = + = 2 1 1 ( ) log 2 log 2 1 2 2 H X = + = 则： 说明第二个信源的平均不确定性更大一些 第二节 离散信源的信息熵