信息论导引PDF电子书下载

目录 1

第一章　绪论 1

1.1 几个概念与信息论的研究内容 1

1.2　概率论相关知识 4

1.3　凸函数与詹森不等式 15

习题一 17

第二章　离散信源及其量化 18

2.1　离散信源与信息的数学模型 18

2.2　事件的信息量 20

2.3　平均自信息——熵 24

2.4　熵的性质 26

2.5　离散平稳信源的极限熵 33

习题二 41

3.1　编码定义及相关概念 43

第三章　信源编码 43

3.2　离散平稳无记忆信源的等长编码 49

3.3　离散平稳无记忆信源的不等长编码 59

习题三 84

第四章　信道及其量化 86

4.1　信道的数学模型 87

4.2　互信息 91

4.3　信道容量 104

习题四 111

第五章　信道编码 112

5.1　基本概念 112

5.2　信道译码方式及译码准则 115

5.3　渐近等分割性与信道编码定理 121

5.4　群码 130

习题五 139

参考文献 140