信息的度量(续) 由于信息量与概率成反比,并且具有可加性, 可以证明,信息量的计算式为 I(xk)=log 2 log 2 其中P是事件X发生的概率,这也是先衣关 于(自)信息量的度量概率信息); 自信息量(x)的含义 当事件ⅹ发生以前,表示事件发生的不确定性; 当事件X发生以后,表示事件X所提供的信息量;信息的度量（续） ◼ 由于信息量与概率成反比，并且具有可加性， 可以证明，信息量的计算式为 其中Pk是事件Xk发生的概率，这也是先农关 于(自)信息量的度量(概率信息)； ◼ 自信息量 I(xk ) 的含义 ◼ 当事件 xk发生以前，表示事件xk发生的不确定性； ◼ 当事件 xk发生以后，表示事件xk所提供的信息量； k k k P p I x 2 2 log 1 ( ) = log = −