信息论与编码学习辅导及习题详解PDF电子书下载

第1章 绪论 1

1.1 基本内容和学习要点 1

1.1.1 信息的概念及常用术语 1

目录 1

1.1.2 通信系统的统一模型 2

1.1.3 信息传输系统的模型 2

2.1.1 信源的分类 4

2.1.2 基本信源的数学模型 4

2.1 基本内容和学习要点 4

第2章 离散信源及其信息测度 4

2.1.3 离散信源的信息熵 5

2.1.4 信息熵的基本性质 5

2.1.5 离散无记忆扩展信源的信息熵 7

2.1.6 离散平稳信源的信息熵 7

2.1.7 马尔可夫信源及其信息熵 9

2.1.8 信源剩余度 11

2.2 习题详解 11

2.3 精选习题解答 35

3.1.1 信道的分类 47

3.1.2 离散信道的数字模型 47

3.1 基本内容和学习要点 47

第3章 离散信道及其信道容量 47

3.1.3 离散信道的平均互信息及其特性 49

3.1.4 多个随机变量之间的平均互信息 52

3.1.5 离散信道的信道容量及其计算方法 52

3.1.6 常见信道的平均互信息和信道容量 53

3.1.7 无记忆N次扩展信道的I（X；Y）和容量CN 54

3.1.8 独立并联信道的互信息和信道容量 54

3.1.9 串接信道互信息及信道容量 55

3.1.10 信道剩余度 55

3.2 习题详解 55

3.3 精选习题解答 85

第4章 波形信源和波形信道 103

4.1 基本内容和学习要点 103

4.1.1 连续信源的差熵 103

4.1.2 多维连续平稳信源的信息熵 103

4.1.3 波形信源的差熵 105

4.1.4 差熵的性质 105

4.1.5 最大差熵定理 106

4.1.6 连续信源熵的变换 106

4.1.7 熵功率和熵功率不等式 107

4.1.8 波形信道和连续信道的分类和数学模型 107

4.1.9 连续信道和波形信道的平均互信息及其特性 108

4.1.11 连续信道与信息传输的匹配 110

4.1.10 连续信道和波形信道的信道容量 110

4.2 习题详解 111

4.3 精选习题解答 140

第5章 无失真信源编码 144

5.1 基本内容和学习要点 144

5.1.1 信源编码和码的类型 144

5.1.2 即时码及其树图构造法 144

5.1.3 惟一可译码存在的充要条件 145

5.1.4 惟一可译码的判断法 145

5.1.5 无失真等长信源编码定理 145

5.1.7 无失真信源编码定理和数据压缩 146

5.1.6 无失真变长信源编码定理（香农第一定理） 146

5.1.8 最佳二元码 147

5.1.9 霍夫曼码和其他编码方法 147

5.1.10 几种实用的无失真信源编码方法 149

5.2 习题详解 150

5.3 精选习题解答 169

第6章 有噪信道编码 179

6.1 基本内容和学习要点 179

6.1.1 译码准则 179

6.1.4 信道编码的编、译基本原则 180

6.1.3 费诺不等式 180

6.1.2 平均错误概率 180

6.1.5 有噪信道编码定理及其逆定理 181

6.1.6 信源信道编码定理 181

6.1.7 纠错码的分类 182

6.1.8 线性分组码的基本概念 182

6.1.9 线性分组码 183

6.1.10 汉明码及其扩展码 184

6.2 习题详解 185

6.3 精选习题解答 204

7.1.1 失真度（失真函数）与平均失真度 207

7.1 基本内容和学习要点 207

第7章 保真度准则下的信源编码 207

7.1.2 信息率失真函数 210

7.1.3 信息率失真函数的特性 210

7.1.4 R（D）函数的参量表述及其计算 211

7.1.5 常见信源的R（D）函数 213

7.1.6 保真度准则下信源编码定理（香农第三定理） 214

7.1.7 信息—传输定理（联合有失真信源信道编码定理） 214

7.2 习题详解 215

7.3 精选习题解答 238

参考书目 242