定理 3-1：对于固定信道，平均互信息 I(X;Y) 是信源概率分布 p(x)的∩型凸函 数。 定理 3-2：对于固定信源分布，平均互信息 I(X;Y)是信道传递概率 p(y|x)的∪型凸函 数。 定理 3-3：设离散信道的输入序列 X＝ (X1X2…XN)通过信道传输，接收到的随机序 列为 Y=( Y1Y2…YN)，而信道的转移概率为 p(y∣x)

1 简介 SPSS是Statistical Program for Social Sciences 的简 称，即社会科学统计程序，由美国SPSS公司1970 年代推出，迄今已有近30年的历史。是国际著名 三大社会科学统计软件包之一（SAS、SPSS、 Statis）。我们现在使用的是SPSS for Windows 8.0 版

一、了解GIS的数据采集方式 二、掌握地图数字化的方法、步骤 三、掌握地图数据的各种处理方法 四、理解属性数据编码的深刻含义 五、了解空间数据的压缩处理的方法及优缺点

2-3.解：设事件 A 为女孩是大学生；设事件 B 为女孩身高 1.6 米以上，根据题意 可知 P(A)＝0.25 P(B)＝0.5 P(B/A)=0.75 “身高 1.6 米以上的某女孩是大学生”这消息表明是在 B 事件发生的条件 下，A 事件发生。所以其概率为P(A/B)

用代数方法来研究数学结构,故又叫代数结构,它将用抽象的方法来研究集合上的关系和运算。 代数的概念和方法已经渗透到计算机科学的许多分支中,它对程序理论,数据结构,编码理论的研究和逻辑电路的设计已具有理论和实践的指导意义。 §1 代数系统的引入 §2 运算及其性质 §3 半群 §4 群与子群 §5 阿贝尔群和循环群 §6* 陪集与拉格朗日定理 §7 同态与同构

一、信息与消息和信号的区别 二、消息：是指包含有信息的语言、文字和图像等，可表达客观物质运动和主观思维活动的状态

1.信息论的形成和发展 2.通信系统的模型

一． 可编程逻辑设计的基本原则 二． 可编程逻辑设计常用设计思想和技巧 三． Altera公司推荐的编码风格 四． 面积优化 五． 速度优化

l 计算机中数制基本概念、数制之间的相互转换 l 无符号数和带符号数的表示方法 l ASCII码和BCD码的相关概念和应用 l 汉字编码及其应用

《信息论与编码》第二章 信源及信源熵（所有习题）参考答案