124无噪声信道容量 >互信息量I(X,Y) 定义:在收到发送码元后,此发送码元的平均不确定度 的下降量 (X; Y=H(X-H(X/Y 式中,H(X)一信源的平均不确定度; H(Y/Y一收到一个码元后发送码元的平均不确定度 上式可以改写为 X,Y)=H(Y)=H(/A) 性质:(X)≥0 >信道容量C 定义:互信息量的最大值 C=m(X,Y)(b/码元) 性质:C仅是信道转移概率的函数; C是一个码元能够传输的最大平均信息量9 12.4 无噪声信道容量 ➢ 互信息量 I (X; Y) ◼ 定义：在收到发送码元后，此发送码元的平均不确定度 的下降量 式中， H(X) － 信源的平均不确定度； H(X / Y) － 收到一个码元后发送码元的平均不确定度 上式可以改写为 ◼ 性质： ➢ 信道容量C ◼ 定义：互信息量的最大值 （b/码元） ◼ 性质：C 仅是信道转移概率的函数； C是一个码元能够传输的最大平均信息量。 I(X;Y) = H(X ) − H(X /Y) I(X;Y) = H(Y) − H(Y / X ) I(X;Y)  0 C = maxI(X;Y)