第1章 绪论 1
1.1 多媒体 1
1.1.1 媒体的含义 1
1.1.2 多媒体的含义 2
1.1.3 多媒体技术的发展历史和现状 2
1.2 多媒体通信 5
1.2.1 多媒体通信的特征 5
1.2.2 多媒体通信的关键技术 6
1.2.3 多媒体通信的网络 7
第2章 多媒体数据压缩编码技术 14
2.1 概述 14
2.2 信源、信息量和熵 14
2.3 率—失真理论 16
2.3.1 信道和信道容量 16
2.3.2 率—失真函数 17
2.3.3 限失真信源编码定理 19
2.4 量化 20
2.4.1 均匀量化 20
2.4.2 最优量化 21
2.5 变换编码 22
2.5.1 离散余弦变换 22
2.5.2 小波变换 24
2.6 预测编码 29
2.6.1 语音的线性预测编码 29
2.6.2 图像的预测编码 31
2.7 熵编码 37
2.7.1 哈夫曼编码 37
2.7.2 算术编码 38
2.7.3 游程编码 40
2.8 形状和纹理编码 40
2.8.1 形状编码 40
2.8.2 纹理编码 43
2.9 可伸缩视频编码 45
2.9.1 空域可伸缩视频编码 45
2.9.2 时域可伸缩视频编码 46
2.9.3 质量可伸缩视频编码 48
2.9.4 频率可伸缩视频编码 49
2.9.5 精细颗粒度的可伸缩视频编码 49
2.9.6 基于小波变换的可伸缩视频编码 50
2.9.7 视频编码国际标准中的可伸缩视频编码方法 52
第3章 多媒体数据压缩编码标准 54
3.1 静止图像压缩编码标准 54
3.1.1 JPEG 54
3.1.2 JPEG 2000 56
3.2 视频压缩编码标准 59
3.2.1 H.261、MPEG-1和MPEG-2 61
3.2.2 H.263、H.263＋和H.263＋＋ 67
3.2.3 MPEG-4 73
3.2.4 H.264 77
3.2.5 AVS 82
3.3 音频压缩编码标准 86
3.3.1 G.7xx系列 87
3.3.2 MPEG伴音系列 88
3.3.3 AVS音频 89
3.3.4 杜比数码系列 90
3.4 图像和视频编码的发展趋势和展望 91
3.4.1 图像和视频编码的基本策略 91
3.4.2 压缩效率——从像素到对象 92
3.4.3 满足网络和终端用户的需求 93
3.4.4 小结 94
第4章 视频通信中的编码速率控制技术 95
4.1 速率控制技术的分类 95
4.1.1 基于率—失真模型的速率控制 96
4.1.2 基于图像内容与人眼视觉特性的速率控制 97
4.1.3 无线信道中顽健性速率控制 98
4.1.4 精细颗粒可伸缩编码的速率控制 99
4.2 速率控制的实现 100
4.2.1 目标比特分配 100
4.2.2 目标比特分配的实现 100
4.3 H.263＋中的速率控制技术 104
4.4 MPEG-2中的速率控制技术 105
4.5 MPEG-4中的速率控制技术 106
4.6 H.264中的速率控制技术 107
4.6.1 JVT-F086 108
4.6.2 JVT-G012 109
4.7 速率控制技术的研究进展 115
4.7.1 R-D模型 115
4.7.2 质量受限的速率控制 116
4.7.3 从客观最优化到主观最优化 117
4.7.4 基于混合结构的最优化 119
第5章 视频通信中的差错控制技术 121
5.1 引言 121
5.2 传输层差错控制 122
5.2.1 FEC 122
5.2.2 ARQ 123
5.2.3 顽健性打包和复用 123
5.2.4 不等差错保护 124
5.3 编码端差错控制 124
5.3.1 差错隔离 124
5.3.2 顽健性二进制编码 125
5.3.3 容错预测 126
5.3.4 具有不等差错保护的分层编码 126
5.3.5 多描述编码 127
5.3.6 联合信源信道编码 129
5.4 解码端差错控制 133
5.4.1 差错检测 133
5.4.2 差错掩盖 134
5.5 交互式差错控制 134
5.5.1 编码参数自适应调整 134
5.5.2 基于反馈信息的参考图像选择 135
5.5.3 基于反馈的差错跟踪 135
5.5.4 无等待重传 135
5.6 H.263＋和H.263＋＋中的差错控制技术 135
5.7 MPEG-4中的差错控制技术 136
5.8 H.264中的差错控制技术 138
5.9 AVS-M中的差错控制技术 143
第6章 实时多媒体业务传输协议 146
6.1 引言 146
6.2 传输层协议 146
6.2.1 TCP 146
6.2.2 UDP 147
6.2.3 RTP 147
6.2.4 RTCP 149
6.3 会话控制协议 150
6.3.1 RTSP 150
6.3.2 SIP 151
第7章 多媒体通信终端 152
7.1 概述 152
7.2 H.323 153
7.2.1 H.323协议 153
7.2.2 H.323系统 155
7.3 SIP 158
7.3.1 下一代网络和软交换 158
7.3.2 SIP系统 160
7.3.3 SIP和H.323的比较 161
7.3.4 SIP在IMS中的应用 162
7.4 H.324 164
7.4.1 H.324协议 164
7.4.2 H.324系统 165
7.5 H.320 166
7.5.1 H.320协议 166
7.5.2 H.320系统 167
7.6 H.321、H.310和H.322 167
7.6.1 H.321 167
7.6.2 H.310 168
7.6.3 H.322 169
第8章 多媒体同步 170
8.1 基本概念 170
8.1.1 多媒体数据内部的约束关系 170
8.1.2 逻辑数据单元 171
8.1.3 媒体内同步、媒体间同步和组同步 172
8.2 媒体同步的参考模型 173
8.2.1 媒体层 173
8.2.2 流层 174
8.2.3 对象层 174
8.2.4 描述层 174
8.3 同步描述 174
8.3.1 同步要求 175
8.3.2 同步描述的方法 177
8.4 分布式多媒体系统中的同步 180
8.4.1 分布式多媒体系统结构 180
8.4.2 同步描述数据的传送 181
8.4.3 影响媒体同步的因素 182
8.5 媒体同步控制技术 182
8.5.1 面向时间的播放控制算法 183
8.5.2 面向缓冲区的播放控制算法 184
8.6 MPEG-2媒体同步控制算法 184
8.6.1 引言 184
8.6.2 节目流或传输流中的时间标签 185
8.6.3 MPEG-2解码器中常见的同步机制 188
8.6.4 新的媒体同步控制算法 191
参考文献 196