第二节波形信源和波形信源的信息测度 波形信源的差熵 实际信源的输入和输出都是平稳随机过程,其()和 {y(t)}可以通过取样,分解成取值连续的无穷平稳随机序列 来表示,所以平稳随机过程的熵就是无穷平稳随机序列的熵。 h(X)=h(X1X2.Xw)=,P(x)log p(x)dx h(r)=h(YY.Y)=P(y)log p(y)dy h(|X)=h(x1…|X1…Xx)= R:JR p(xy)log p(ylx)dxdy h(X|Y)=h(X1…XN|X1…Y)= 「p(x)lgp(x1y)lob 波形信源的差熵:h{x(D)}=lmh(X)第二节 波形信源和波形信源的信息测度 波形信源的差熵 实际信源的输入和输出都是平稳随机过程，其 {x(t)}和 {y(t)}可以通过取样，分解成取值连续的无穷平稳随机序列 来表示，所以平稳随机过程的熵就是无穷平稳随机序列的熵。 1 2 ( ) ( ) ( )log ( ) N R h X h X X X p x p x dx = = − 1 2 ( ) ( ) ( )log ( ) N R h Y h YY Y p y p y dy = = − 1 1 ( | ) ( | ) ( )log ( | ) N N R R h Y X h Y Y X X p xy p y x dxdy = = −  1 1 ( | ) ( | ) ( )log ( | ) N N R R h X Y h X X Y Y p xy p x y dxdy = = −  波形信源的差熵: { ( )} lim ( ) N h x t h X →