基础信息论PDF电子书下载

第一章　信息论的背景 1

1.1　准确性与经济性 1

1.2　信息与频率 2

1.3　信息论的先驱 5

第二章　信息的定量表示 6

2.1　定量表示信息的必要性 6

2.2　信息量的性质 6

2.3　概率与信息量 9

第三章　随机过程的信息 12

3.1　马尔可夫过程 12

3.2　香农线图 13

3.3　迁移概率 17

3.4　香农线图的应用 19

第四章　熵 22

4.1　熵 22

4.2　剩余度与熵 26

4.3　错误与熵 28

4.4　独立事件与熵 32

第五章　信道 39

5.1　信息传输的速度 39

5.2　信道容量 41

5.3　香农线图与信道容量 44

5.4　有错系统的信道容量 46

第六章　编码 50

6.1　信源与信道 50

6.2　香农第一编码定理 51

6.3　香农编码法 55

6.4　霍夫曼编码法 58

6.5　编码效率 60

6.6　有错时的编码定理 61

6.7　汉明距离 65

6.8　奇偶校验 69

6.9　循环编码 71

第七章　连续随机函数的信息量 74

7.1　连续随机变量 74

7.2　连续信源的熵 78

7.3　正态分布函数的熵 81

7.4　连续随机函数的信道容量 83

第八章　频谱 90

8.1　内容与形式 90

8.2　频率 92

8.3　相关函数 93

8.4　频谱 95

8.5　高次谐波 100

8.6　时域与频域 105

8.7　噪声的功率 110

8.8　脉冲的功率 115

第九章　抽样定理 120

9.1　连续波形表现信息的能力 120

9.2　抽样定理 122

9.3　抽样定理的应用 127

第十章　信道的传输特性 131

10.1　信道 131

10.2　非线性系统 134

10.3　信道频率特性的表示方法 136

10.4　各种频率特性表示方法的比较 145

第十一章　信道的频率特性与信息量 153

11.1　信道带宽的限制造成的信息损失 153

11.2　由于带宽限制使熵减小的公式 154

第十二章　波形的传输 160

12.1冲激响应与阶跃响应 160

12.2　信道的延迟特性 164

12.3　脉冲的传输 165

12.4　脉冲序列的传输 168

12.5　停留相位原理 170

12.6　S/N（信号噪声比）最大的信道 173

12.7　输出波形失真最小、S/N最大的信道 177

12.8　信道特性与相关函数 181

第十三章　波形的变换 185

13.1　编码、调制与压扩 185

13.2　调制的方式 186

13.3　幅度调制 188

13.4　频率调制 191

13.5　脉冲调制 199

第十四章　信号的检出 203

14.1　检波 203

14.2　埋没于噪声的信号的检出 205

14.3　统计判定法 206

附表1 210

附表2 211

习题解答 212