第1章 绪论 1
1.1 什么是多媒体系统 1
1.1.1 概述 1
1.1.2 多媒体系统 2
1.1.3 多媒体系统的应用及分类 3
1.2 多媒体系统的主要特性 5
1.2.1 集成性 5
1.2.2 交互性 6
1.2.3 实时性 7
1.2.4 人机合作 8
1.3 多媒体系统研究的主要问题 9
1.3.1 多媒体系统体系结构 9
1.3.2 媒体、空间与时间 9
1.3.3 多媒体系统的基础环境 10
1.3.4 多媒体应用系统 10
习题与思考题 11
1.3.5 虚拟现实系统 11
第2章 多媒体系统体系结构 12
2.1 多媒体系统的体系结构框架 12
2.1.1 多媒体系统的基本结构 12
2.1.2 多媒体系统的体系框架 12
2.1.3 多媒体分布处理模型 13
2.1.4 多媒体信息模型 15
2.2 多媒体系统的需求和公共属性 16
2.2.1 多媒体系统中的媒体流动 16
2.1.6 多媒体会议模型 16
2.1.5 多业务网络模型 16
2.2.2 连续媒体的需求 17
2.2.3 服务质量QoS 18
2.2.4 同步与合成 20
2.3 多媒体系统的标准化体系 22
2.3.1 国际标准化组织和标准类型 22
2.3.2 JTC1标准化工作 23
2.3.3 ITU-T标准化工作 24
2.4 小结 25
习题与思考题 26
第3章 媒体与媒体技术 27
3.1 概述 27
3.1.1 媒体的种类 27
3.1.2 媒体的性质和特点 28
3.2 听觉媒体技术 30
3.2.1 声音心理学 30
3.2.2 音频的数字化和符号化 33
3.2.3 音频媒体的压缩编码方法 35
3.2.4 音频媒体的三维化处理 38
3.3 视觉媒体技术 42
3.3.1 视觉心理学 42
3.3.2 模拟视频原理与显示设备 44
3.3.3 视觉媒体数字化 45
3.3.4 图像和视频的压缩 47
3.3.5 视觉媒体的三维立体显示 55
3.4 触觉媒体技术 59
3.4.1 触觉媒体概述 59
3.4.2 简单指点设备与技术 60
3.4.3 位置跟踪 60
3.4.4 力反馈与触觉反馈 63
3.5 小结 64
习题与思考题 64
4.1 概述 66
第4章 基于时间媒体的表示与同步 66
4.2 时间模型 67
4.2.1 时间依赖的定义 67
4.2.2 时间的概念模型 68
4.3 多媒体对时间的需求及表示 69
4.3.1 时间规范 69
4.3.2 相对时间规范与绝对时间规范 70
4.3.3 时间控制和转换 73
4.3.4 多媒体表现的时间表示方法 75
4.3.5 交互与同步 82
4.4 时间同步及系统支持 83
4.4.1 概述 83
4.4.2 同步 83
4.4.3 系统支持的有关问题 85
4.5 小结 87
习题与思考题 87
第5章 多媒体操作系统 88
5.1 概述 88
5.2 计算机操作系统的问题 88
5.2.1 操作系统的基本概念 88
5.2.2 多媒体的引入与操作系统的限制 90
5.3 操作系统对连续媒体的支持 94
5.3.1 体系结构的支持 94
5.3.2 资源管理的支持 95
5.3.3 程序设计的支持 96
5.4.1 单流情况 99
5.4 支持连续媒体的文件系统 99
5.3.4 实时IPC 99
5.4.2 多流情况 100
5.4.3 介质调度 102
5.4.4 连续媒体访问的性能保证 105
5.5 小结 109
习题与思考题 109
6.1 概述 110
6.1.1 多媒体系统服务的目标 110
第6章 多媒体中件系统服务 110
6.1.2 多媒体系统服务的功能 111
6.2 多媒体系统服务体系 111
6.2.1 对象框架 111
6.2.2 接口继承 113
6.2.3 典型范例 113
6.3 多媒体系统服务的对象和类 114
6.3.1 多媒体系统服务对象概念 114
6.3.2 虚拟资源 114
6.3.3 虚设备 117
6.3.4 虚连接 118
6.3.5 组 119
6.3.6 流 120
6.4 多媒体系统服务的实现 122
6.4.1 虚设备的实现 122
6.4.2 虚连接的实现 125
6.4.3 组的实现 127
6.4.4 流结构的实现 128
6.4.5 例子：音频视频的同步采集与播放 132
6.5 多媒体中件系统中的同步处理 133
6.5.1 分布环境下影响多媒体同步的因素 133
6.5.2 基于网络延迟的同步结构和协议 133
6.5.3 操作同步 136
6.5.4 强制同步机制 139
6.6 小结 140
习题与思考题 140
7.1.1 多媒体交换的作用与模式 141
第7章 多媒体交换 141
7.1 概述 141
7.1.2 多媒体交换格式设计要点 142
7.2 轨迹类交换格式 143
7.2.1 QuickTime影片文件（QMF）格式 143
7.2.2 OMFI 146
7.3 MHEG信息交换标准 147
7.3.1 MHEG的含义 147
7.3.2 MHEG对象 148
7.3.3 MHEG链 148
7.3.4 行为和动作 150
7.3.5 表现和交互 151
7.3.6 MHEG运行环境的实现 153
7.4 交换格式的比较和相关问题 155
7.4.1 三种格式的比较 155
7.4.2 轨迹模型与对象模型的差异 155
7.4.3 实时交换 157
7.5 小结 158
7.4.4 评价模型 158
习题与思考题 159
第8章 超媒体与超媒体系统 160
8.1 概述 160
8.1.1 超文本与超媒体的概念 160
8.1.2 超媒体的简史 162
8.1.3 超媒体的应用 163
8.2 超媒体系统的组成和原理 164
8.2.1 超媒体的组成要素 164
8.2.2 超媒体系统的Dexter模型 168
8.2.3 超媒体系统的组成 171
8.2.4 多媒体表现创作和超媒体写作 173
8.3 开放超媒体系统 177
8.3.1 开放超媒体的概念 177
8.3.2 开放超媒体系统的实例：Microcosm 178
8.3.3 WWW中的超媒体协议 182
8.4.1 智能超媒体的概念 185
8.4 智能超媒体系统 185
8.4.2 智能超媒体的节点和链 186
8.4.3 智能超媒体的推理模型 187
8.5 小结 188
习题与思考题 189
第9章 多媒体数据库系统 190
9.1 多媒体数据管理的问题 190
9.1.1 概述 190
9.1.2 多媒体数据管理的问题 191
9.1.3 多媒体数据与数据库管理 193
9.2 多媒体数据库体系结构 194
9.2.1 多媒体数据库的一般结构形式 194
9.2.2 多媒体数据库的层次结构 196
9.3 多媒体数据模型 197
9.3.1 NF2数据模型 197
9.3.2 面向对象数据模型 198
9.3.3 其它数据模型 201
9.4.1 字符数值型接口 203
9.4 多媒体数据库的用户接口 203
9.4.2 示例型接口 204
9.4.3 用户表现接口 206
9.5 小结 208
习题与思考题 209
第10章 基于内容检索 210
10.1 概述 210
10.1.1 多媒体与媒体语义 210
10.1.2 基于内容检索的特点及应用 211
10.2 基于内容检索系统的结构和方法 212
10.2.1 基于内容检索系统的一般结构 212
10.2.2 媒体的内容语义 213
10.2.3 基于内容检索的过程及指标 214
10.2.4 特征匹配：过程及方法 215
10.3 图像内容分析及检索方法 218
10.3.1 基于颜色直方图检索 218
10.3.2 颜色对方法 220
10.3.3 图像轮廓、纹理特征的检索简述 221
10.4 视频检索与索引 222
10.4.1 视频媒体的分割 222
10.4.2 视频索引 225
10.5 范例：QBIC系统 227
10.5.1 系统概述 227
10.5.2 数据库生成 229
10.5.3 示例查询 230
10.5.4 快速搜索和索引 231
10.6 小结 231
习题与思考题 232
第11章 多媒体通信网络 233
11.1 分布多媒体应用的通信需求 233
11.1.1 概述 233
11.1.2 多媒体通信的需求 233
11.2 多媒体通信服务 236
11.2.1 通信服务中的服务质量QoS 237
11.2.2 多播通信 239
11.3.1 应用需求 240
11.3.2 现有网络分析 240
11.3 多媒体与现有通信网络技术 240
11.4 综合业务数字网ISDN 245
11.4.1 窄带ISDN 245
11.4.2 宽带ISDN 248
11.5 异步转移模式ATM 249
11.5.1 ATM概念 249
11.5.2 信元结构 250
11.5.3 ATM网络结构 251
11.5.4 ATM连接 252
11.5.5 ATM协议参考模型 253
11.6 小结 257
习题与思考题 258
12.1 什么是多媒体会议系统 259
12.1.1 多媒体会议系统和协同工作 259
第12章 多媒体会议系统 259
12.1.2 会议系统的分类 261
12.1.3 会议系统的国际标准和建议简介 264
12.2 多媒体会议系统结构 266
12.2.1 多点会议系统的结构 266
12.2.2 多点控制单元MCU 268
12.2.3 N—ISDN上的会议系统结构及终端 269
12.2.4 局域网上的会议系统结构及终端 271
12.2.5 电话网上的会议系统结构及终端 276
12.3 会议系统的数据协议 279
12.3.1 会议系统的数据协议模型 279
12.3.2 多点通信服务 283
12.4 会议控制和数据应用 286
12.4.1 会议控制 286
12.4.2 数据应用 290
12.5 小结 292
习题与思考题 292
13.1.1 视频服务 294
13.1 什么是视频点播和交互电视 294
第13章 视频点播与交互电视 294
13.1.2 视频点播与交互电视的概念 295
13.1.3 纯视频点播与准视频点播 296
13.1.4 视频点播系统的功能 298
13.2 视频点播／交互电视系统的结构 298
13.2.1 视频服务和管理设备 298
13.2.2 机顶盒 301
13.2.3 传送网络 303
13.3.1 信息使用的非对称模式与对称模式 304
13.3 用户接入网技术 304
13.3.2 基本的用户接入方式 305
13.4 视频服务器 308
13.4.1 视频存储子系统 308
13.4.2 视频服务器的结构 310
13.4.3 一种视频点播系统的视频存储结构示例 313
13.5 小结 316
习题与思考题 316
14.1.2 虚拟现实系统的特性 318
14.1.1 虚拟现实的基本概念 318
第14章 虚拟现实系统 318
14.1 什么是虚拟现实 318
14.1.3 虚拟现实技术简史 319
14.1.4 虚拟现实系统的分类 322
14.1.5 虚拟现实系统的应用 323
14.2 虚拟现实系统的组成 325
14.2.1 虚拟现实系统的体系结构 325
14.2.2 人机交互的设备及技术 328
14.2.3 三维场景建模 331
14.2.4 虚拟现实软件及开发工具 333
14.2.5 典型系统及相关技术 335
14.3 全景视频系统 339
14.3.1 什么是全景视频 339
14.3.2 全景视频的实现方法 341
14.4 小结 345
习题与思考题 345