信息论与编码理论PDF|Epub|txt|kindle电子书版本网盘下载

信息论与编码理论PDF格式电子书版下载

注意：本站所有压缩包均有解压码： 点击下载压缩包解压工具

第1章 绪论1

1.1 信息1

1.1.1 信息的概念1

1.1.2 信息的性质2

1.2 通信系统模型2

1.2.1 信源和信宿3

1.2.2 编码器和译码器3

1.2.3 信道和噪声3

1.3 离散与连续3

1.4 信息论和编码理论的形成和发展4

小结5

习题6

第2章 信息的统计度量7

2.1 自信息和条件自信息7

2.1.1 自信息的定义与含义7

2.1.2 条件自信息的定义与含义8

2.2 互信息9

2.2.1 互信息的定义与含义9

2.2.2 互信息的性质9

2.3 平均自信息（熵）11

2.3.1 熵的定义与含义11

2.3.2 熵函数的数学性质12

2.3.3 条件熵17

2.3.4 联合熵17

2.3.5 各种熵之间的关系17

2.4 平均互信息20

2.4.1 平均互信息的定义与含义20

2.4.2 平均互信息的性质20

2.4.3 各种熵和平均互信息量之间的关系21

2.5 连续随机变量的互信息和相对熵22

2.5.1 连续随机变量的统计特性22

2.5.2 连续随机变量的互信息23

2.5.3 连续随机变量的相对熵23

小结24

习题25

第3章 离散信源29

3.1 离散信源的数学模型29

3.2 信源的分类29

3.2.1 无记忆信源30

3.2.2 有记忆信源30

3.3 离散无记忆信源30

3.3.1 离散无记忆信源及其熵30

3.3.2 离散无记忆信源的扩展信源及其熵32

3.4 马尔可夫信源33

3.4.1 马尔可夫信源的定义33

3.4.2 有限状态马尔可夫链34

3.4.3 马尔可夫信源的马尔可夫链性质35

3.4.4 马尔可夫信源的熵36

3.5 离散平稳信源40

3.5.1 平稳信源的概念40

3.5.2 平稳信源的熵41

3.6 信源的相关性和剩余度44

小结45

习题46

第4章 离散信道50

4.1 离散信道的数学模型50

4.2 信道的分类50

4.3 离散无记忆信道53

4.3.1 离散无记忆信道的数学模型53

4.3.2 信道疑义度和噪声熵54

4.3.3 信道的平均互信息及其含义55

4.4 信道的组合58

4.5 信道容量61

4.5.1 信息传输率61

4.5.2 信道容量的定义及含义62

4.5.3 三种特殊信道的容量62

4.5.4 对称信道的容量63

4.5.5 一般信道的容量65

4.5.6 信源和信道的匹配71

小结71

习题72

第5章 连续信源和连续信道76

5.1 连续信源76

5.1.1 连续信源的数学模型76

5.1.2 连续信源的熵和互信息76

5.2 连续信道及其信道容量79

5.2.1 时间离散信道79

5.2.2 连续信道81

小结82

习题83

第6章 无失真信源编码84

6.1 编码的基本概念84

6.1.1 编码器和译码器84

6.1.2 码的分类85

6.1.3 N次扩展码86

6.2 “无失真”的本质86

6.3 定长码87

6.4 变长码89

6.4.1 变长码的衡量指标89

6.4.2 变长码的特点90

6.4.3 唯一可译码和即时码的判别91

6.4.4 无失真信源编码定理（香农第一定理）95

6.5 霍夫曼码98

6.5.1 二元霍夫曼码98

6.5.2 多元霍夫曼码100

6.6 算术编码102

6.6.1 算术编码的基本原理102

6.6.2 算术编码方法103

6.6.3 算术译码方法105

6.7 LZW编码106

6.7.1 LZW基本原理106

6.7.2 LZW编码方法106

小结108

习题109

第7章 限失真信源编码113

7.1 失真的度量113

7.1.1 失真函数和失真矩阵113

7.1.2 序列失真114

7.1.3 平均失真和保真度准则115

7.2 信息率失真函数115

7.2.1 信息率失真函数的定义和含义115

7.2.2 信息率失真函数的定义域和性质116

7.2.3 信息率失真函数和信道容量的关系119

7.2.4 限失真信源编码定理（香农第三定理）120

7.3 量化编码120

7.3.1 量化编码的主要作用120

7.3.2 均匀量化120

7.3.3 最优量化121

7.3.4 矢量量化编码121

7.4 预测编码121

7.4.1 预测编码的基本原理和方法122

7.4.2 预测编码能够限失真压缩信源的原因122

7.4.3 DPCM编译码原理123

7.5 变换编码123

7.5.1 变换编码的基本原理123

7.5.2 变换编码能够限失真压缩信源的原因125

7.5.3 离散余弦变换126

7.5.4 变换编码的广泛应用127

小结127

习题128

第8章 信道编码130

8.1 信道编码的基本概念130

8.1.1 编译码规则、检纠错能力130

8.1.2 平均错误译码概率131

8.2 译码规则133

8.3 有噪信道编码定理（香农第二定理）134

8.4 线性分组码134

8.4.1 基本概念134

8.4.2 线性分组码的性质135

8.4.3 线性分组码的两个重要参数——编码效率和最小汉明距离136

8.4.4 生成矩阵和监督矩阵138

8.4.5 对偶码141

8.4.6 伴随式、伴随式的错误图样表示、根据伴随式译码142

8.4.7 汉明码144

8.5 循环码145

8.5.1 循环码的基本概念145

8.5.2 循环码的生成多项式和监督多项式146

8.5.3 循环码的译码148

8.5.4 BCH码149

8.5.5 RS码150

8.6 卷积码150

8.6.1 卷积码的基本概念和基本原理150

8.6.2 卷积码的编码151

8.6.3 卷积码的矩阵表述152

8.7 突发错误的纠正153

8.7.1 基本概念153

8.7.2 级联码154

8.7.3 交织码154

8.7.4 Turbo码155

小结156

习题157

附录A 凸函数与詹森（Jensen）不等式160

A.1 一元函数的凸性160

A.2 函数凸性的判别160

A.3 Jensen不等式161

A.4 凸域和凸函数161

A.5 凸域中的Jensen不等式162

附录B BCH编码表163

参考文献168