目录 1
第1章 绪论 1
1.1 多媒体的基本概念 1
1.1.1 媒体与多媒体 1
1.1.2 多媒体的关键特性 2
1.2 多媒体技术的产生与发展 4
1.2.1 多媒体是技术与应用发展的必然 4
1.2.2 多媒体改善了人类信息的交流 5
1.2.3 多媒体缩短了人类传递信息的路径 6
1.3 多媒体技术研究的主要内容 7
1.3.1 多媒体技术的基础 7
1.3.2 多媒体软硬件平台技术 8
1.3.3 多媒体操作系统技术 8
1.4 小结 9
1.3.5 多媒体通信与分布应用技术 9
1.3.4 多媒体信息管理与处理技术 9
习题与思考题 10
第2章 媒体及媒体技术 11
2.1 媒体的种类和特点 11
2.1.1 常见的媒体元素 11
2.1.2 媒体的种类 15
2.1.3 媒体的性质和特点 16
2.2 听觉媒体技术 18
2.2.1 声音心理学 18
2.2.2 音频的数字化和符号化 21
2.2.3 音频媒体的三维化处理 24
2.3 视觉媒体技术 27
2.3.1 视觉心理学 27
2.3.2 模拟视频原理 28
2.3.3 视觉媒体数字化 29
2.3.4 视觉媒体的三维立体显示 32
2.4 触觉媒体技术 35
2.4.1 触觉媒体概述 35
2.4.2 简单指点设备与技术 36
2.4.3 位置跟踪 37
2.4.4 力反馈与触觉反馈 39
2.5 小结 40
习题与思考题 41
第3章 多媒体数据压缩 42
3.1 数据压缩的基本原理和方法 42
3.1.1 数据压缩技术的性能指标 42
3.1.2 数据冗余的类型与压缩方法分类 43
3.1.3 常用数据压缩方法的基本原理 44
3.1.4 音频压缩编码的基本方法 51
3.1.5 图像和视频压缩编码的基本方法 52
3.2 音频压缩标准 53
3.2.1 电话质量的语音压缩标准 54
3.2.2 调幅广播质量的音频压缩标准 54
3.2.3 高保真立体声音频压缩标准 55
3.3 图像压缩标准 56
3.3.1 JPEG压缩标准 56
3.3.2 JPEG 2000简介 62
3.4 视频压缩标准 64
3.4.1 MPEG压缩标准 64
3.4.2 H.26L视频编码标准 72
3.4.3 H.26L标准和MPEG-4标准特点的比较 77
3.5 小结 77
习题与思考题 78
4.1 光存储设备 79
4.1.1 光存储的类型 79
第4章 多媒体硬件环境 79
4.1.2 CD-ROM光存储系统 80
4.1.3 CD-R光存储系统 81
4.1.4 DVD光存储系统 82
4.2 音频接口 84
4.2.1 音频卡的工作原理 84
4.2.2 音乐合成和MIDI接口规范 88
4.2.3 语音合成 89
4.2.4 语音识别 90
4.3 视频接口 91
4.3.1 视频图像显示 91
4.3.2 视频卡 95
4.4 多媒体I/O设备 96
4.4.1 笔输入 96
4.4.2 触摸屏 98
4.4.3 扫描仪 101
4.4.4 数码相机 104
4.4.5 虚拟现实的三维交互工具 105
4.4.6 输入输出接口 109
4.5 小结 111
习题与思考题 111
第5章 多媒体软件基础 112
5.1 多媒体软件系统层次 112
5.2 多媒体素材制作软件 113
5.2.1 文本编辑与录入软件 114
5.2.2 图形与图像编辑与处理软件 115
5.2.3 音频编辑与处理软件 116
5.2.4 视频编辑 119
5.2.5 动画编辑 121
5.3 多媒体著作工具 123
5.3.1 多媒体著作工具概述 124
5.3.2 Authorware概述 126
5.3.3 Director概述 128
5.4 多媒体软件编程技术 129
5.4.1 媒体控制接口（MCI） 129
5.4.2 多媒体API数 132
5.4.3 DirectShow 134
5.4.4 多媒体应用设计过程 138
5.5 小结 140
习题与思考题 140
第6章 多媒体的时间表示与同步 141
6.1 多媒体同步的基本概念 141
6.1.1 同步的基本概念 141
6.1.2 同步的种类 142
6.1.3 同步的分层服务模型 143
6.2.1 时间依赖的定义 144
6.2 时间模型 144
6.2.2 时间的概念模型 145
6.3 时间的规范与表示 146
6.3.1 时间规范 146
6.3.2 相对时间规范与绝对时间规范 146
6.4 多媒体同步的表示方法 149
6.4.1 基于图形的表示法 149
6.4.2 基于脚本的表示法 151
6.4.3 交互和同步 155
6.5 时间同步与系统支持 156
6.5.1 概述 156
6.5.2 系统支持的有关问题 157
6.6 小结 158
习题与思考题 159
7.1.1 操作系统的基本概念 160
第7章 多媒体操作系统 160
7.1 计算机操作系统的问题 160
7.1.2 多媒体的引入与操作系统的限制 163
7.2 操作系统对连续媒体的支持 166
7.2.1 体系结构的支持 166
7.2.2 资源管理的支持 167
7.2.3 程序设计的支持 169
7.2.4 实时IPC（进程间通信） 171
7.3 支持连续媒体的文件系统 171
7.3.1 单流情况 172
7.3.2 多流情况 173
7.3.3 介质调度 174
7.4 小结 178
习题与思考题 178
8.1.1 超媒体的概念和发展历史 180
第8章 超媒体与Web系统 180
8.1 超媒体系统的组成 180
8.1.2 超媒体的组成要素 183
8.1.3 超媒体系统的Dexter模型 188
8.2 Web超媒体系统 191
8.2.1 分布式超媒体系统WWW 191
8.2.2 WWW中的超媒体协议与标记语言 192
8.3 智能超媒体系统 198
8.3.1 智能超媒体的概念 198
8.3.2 智能超媒体的节点和链 199
8.3.3 智能超媒体的推理模型 200
8.4 小结 202
习题与思考题 202
9.1 多媒体数据管理的问题 203
9.1.1 概述 203
第9章 多媒体数据库 203
9.1.2 多媒体数据管理的问题 204
9.1.3 多媒体数据与数据库管理 206
9.2 多媒体数据库体系结构 208
9.2.1 多媒体数据库的一般结构形式 208
9.2.2 多媒体数据库的层次结构 209
9.3 多媒体数据模型 211
9.3.1 NF2数据模型 211
9.3.2 面向对象数据模型 212
9.3.3 其他数据模型 215
9.4 多媒体数据库的用户接口 216
9.4.1 字符数值型接口 216
9.4.2 示例型接口 218
9.4.3 用户表现接口 220
习题与思考题 222
9.5 小结 222
第10章多媒体信息分析与处理 223
10.1基于内容检索的系统结构和方法 223
10.1.1 多媒体与媒体语义 223
10.1.2基于内容检索系统的一般结构 224
10.1.3基于内容检索的过程和指标 225
10.1.4特征匹配：过程及方法 227
10.2图像内容分析及检索方法 229
10.2.1 图像特征的提取与表达 230
10.2.2 图像相似性检索与匹配方法 233
10.2.3 图像检索中的相关反馈机制 235
10.3 视频结构化与视频摘要 236
10.3.1 视频媒体基本特性 236
10.3.2 镜头边界探测 238
10.3.3 关键帧提取 240
10.3.4 故事单元边界探测 241
10.3.5 视频摘要 243
10.4 基于内容的音频处理与检索 245
10.4.1 概述 245
10.4.2 音频结构化的概念模型 246
10.4.3 音频特征提取 247
10.4.4 音频分类 248
10.4.5 音频分割 249
10.4.6 基于内容的音频检索 250
10.5 多媒体融合分析与检索 252
10.5.1 多媒体特征融合 252
10.5.2 单媒体交叉索引 253
10.5.3 单媒体结果融合 254
10.5.4 融合多特征的新闻故事单元探测方法 254
10.6 小结 255
习题与思考题 256
第11章 多媒体通信与网络 257
11.1 分布式多媒体应用的通信需求 257
11.1.1 多媒体数据流的基本特征 257
11.1.2 多媒体通信的性能需求 258
11.2 多媒体通信的服务质量 260
11.2.1 QoS的基本概念 260
11.2.2 QoS的管理 263
11.3 多媒体通信网络环境 265
11.3.1 局域网络 266
11.3.2 广域网络 269
11.3.3 ATM网络 271
11.3.4 多协议标签交换MPLS 276
11.4 多媒体通信协议 278
11.4.1 IPv6 279
11.4.2 RSVP 280
11.4.3 RTP 282
11.5 流媒体技术 283
11.5.1 流式传输的基础 283
11.5.2 流媒体技术原理 284
11.5.3 流媒体应用 285
11.6 无线多媒体技术 286
11.6.1 无线多媒体通信网的系统结构 286
11.6.2 无线多媒体通信的关键技术 286
11.7 小结 287
习题与思考题 288
第12章 分布式多媒体应用系统 289
12.1 引言 289
12.1.1 多媒体通信系统 289
12.1.2 分布式多媒体系统 290
12.2.1 多媒体会议系统概述 291
12.2 多媒体会议系统 291
12.2.2 多媒体会议系统结构与关键技术 293
12.2.3 多媒体会议系统的国际标准 297
12.2.4 虚拟空间会议系统（VST） 300
12.3 VOD与ITV系统 302
12.3.1 视频点播与交互电视的概念 302
12.3.2 VOD/ITV系统的结构 304
12.3.3 视频服务器 307
12.3.4 用户接入网技术 310
12.4 CSCW和群件 312
12.4.1 CSCW概述 312
12.4.2 群件系统 313
12.5 小结 316
习题与思考题 317
主要参考文献 319