第一章 多媒体计算机技术概述 1
1.1多媒体计算机的定义、分类及其发展趋势 1
1.1.1利用多媒体是计算机技术发展的必然趋势 1
1.1.2多媒体计算机的定义和分类 2
1.1.3在多媒体计算机发展史上卓有成效的公司和系统 3
1.2多媒体技术促进了通信、娱乐和计算机的融合 10
1.2.1多媒体技术是解决常规电视数字化及高清晰度电视(HDTV)切实可行的方案 10
1.2.2用多媒体技术制作V-CD及影视音响卡拉OK机 13
1.2.3个人信息通信中心(PIC) 15
1.3多媒体计算机技术的发展和应用 17
1.3.1多媒体数据库 19
1.3.2多媒体通信 20
1.3.3多媒体创作工具及其应用 21
1.3.4多媒体计算机的发展趋势 21
第二章 视频信息获取、处理和显示技术 23
2.1图像的彩色空间表示及其转换 23
2.1.1颜色的基本概念 24
2.1.2彩色空间 25
2.1.3彩色空间的转换 30
2.2视频信息获取技术 32
2.2.1视频信号获取器的工作原理 33
2.2.2彩色全电视信号的数字锁相和数字解码 40
2.2.3视频信号获取器的诊断和驱动软件 42
2.3视频信息的实时处理 44
2.3.1视频数字信号快速处理器的作用 44
2.3.2基于DSP的视频信号快速处理器 46
2.3.3流水线结构的图像处理机 52
2.4视频信息显示技术及图像文件格式转换 56
2.4.1显示技术概述 56
2.4.2字符和彩色图形显示控制器 58
2.4.3最新的图形显示标准XGA卡的原理和设计 64
2.4.4图像文件格式及其转换 74
3.1.1多媒体中音频信息的应用 87
第三章 音频信息处理 87
3.1多媒体中的音频信息 87
3.1.2数字音频 92
3.1.3音频信号处理的特点 96
3.2音频的编码基础 96
3.2.1概述 96
3.2.2音频编码算法的评价 97
3.2.3音频的波形编码 99
3.2.4掩蔽效应与感知加权 105
3.3.1概述 109
3.3音频编码标准 109
3.3.2 G.711-话音的PCM编码 110
3.3.3 G.721-32kb/s自适应差值脉冲编码调制(ADPCM) 111
3.3.4 G.722-64kb/s(7kHz)音频编码 116
3.3.5低延时CELP 16kb/s语音编码标准 121
3.3.6 MPEG中的音频编码 122
3.3.7 AC-3音频传输和存储的感知编码 133
3.4计算机言语输出 141
3.4.1概述 141
3.4.2计算机言语输出的主要技术 142
3.4.3汉语文语转换系统 145
3.4.4韵律描述与模拟 148
3.4.5从概念到语音的转换(CTS) 156
3.4.6计算机言语输出技术的展望 161
3.5音乐合成和MIDI 163
3.5.1概述 163
3.5.2音乐基础知识 163
3.5.3调频音乐合成 164
3.5.4 MIDI 170
3.6.1引言 173
3.6.2声音的感知 173
3.6真实感声音的模拟 173
3.6.3 Shaw方法 176
3.6.4卷积方法 178
3.7基于音频内容的检索技术 182
3.7.1引言 182
3.7.2分析和检索 183
3.7.3应用 189
3.7.4未来的方向 192
3.7.5 Jabber 193
3.8语音识别 195
3.8.2语音识别研究的难点 196
3.8.1语音识别系统的分类 196
3.8.3语音识别系统示例 197
3.8.4语音识别技术的应用 202
3.9音频卡工作原理及应用开发 203
3.9.1微机音频卡 203
3.9.2音频卡的功能 204
3.9.3音频卡的发展趋势 206
3.9.4为多媒体增加音频 208
第四章 多媒体数据压缩技术 214
4.1概述 214
4.1.1多媒体数据压缩的必要性和可能性 215
4.1.2数据压缩技术的分类 216
4.2量化 218
4.2.1量化原理 218
4.2.2量化器的设计 218
4.2.3矢量量化 220
4.3统计编码 221
4.3.1统计编码原理 221
4.3.2霍夫曼编码 228
4.3.3算术编码 230
4.3.4行程编码 239
4.4预测编码 242
4.4.1预测编码的基本原理 242
4.4.2自适应预测编码 250
4.4.3电视信号的预测编码 253
4.5变换编码 262
4.5.1变换编码的基本原理综述 262
4.5.2最佳的正交变换K-L变换 273
4.5.3次最优正交变换—DCT变换 282
4.5.4小波变换 293
4.6.1概述 305
4.6多媒体技术的国际标准 305
4.6.2 JPEG标准 306
4.6.3 H.261标准 330
4.6.4 MPEG标准 335
第五章 多媒体计算机硬件及软件系统结构 363
5.1多媒体个人计算机—MPC 364
5.1.1 MPC的技术标准 364
5.1.2 MPC产品及升级策略 368
5.1.3 MPC的功能和应用 372
5.2.1光盘交互式多媒体计算机系统—CD-I的硬件结构 377
5.2光盘交互式多媒体计算机系统—CD-I 377
5.2.2 CD-I光盘实时操作系统 392
5.3数字视频交互式多媒体计算机系统—DVI 397
5.3.1 DVI系统中的视频音频引擎(AVE) 398
5.3.2 DVI硬件系统的关键技术—i50像素处理器和显示处理器 407
5.3.3 DVI硬件系统中的音频视频子系统—AVSS 415
5.3.4在Windows系统环境下开发的AVK 428
5.4将多媒体和通信功能集成到CPU芯片中 441
5.4.1集成的设计原则 442
5.4.2多媒体处理器—Mpact和Trimedia 444
5.4.3 Phenix芯片和MMX技术 475
6.1.1多媒体存储和检索 498
6.1多媒体数据库 498
第六章 多媒体数据库与基于内容检索 498
6.1.2多媒体数据库管理系统 500
6.1.3多媒体应用程序的数据库组织 504
6.1.4多媒体系统的事务管理 506
6.1.5超媒体记录的管理 508
6.2基于内容检索 511
6.2.1基于内容检索的体系结构 512
6.2.2基于内容检索的关键技术 514
6.2.3一个实现实例 529
7.1.1编程与著作 539
第七章 多媒体著作工具与同步方法 539
7.1多媒体著作工具 539
7.1.2著作工具综述 541
7.1.3著作工具的主要功能 551
7.2多媒体同步方法 552
7.2.1同步中的基本概念 553
7.2.2同步参考模型 557
7.2.3同步定义方法 559
7.3 Ark的设计思想 566
7.3.1 EDHM的体系结构 566
7.3.2事件驱动 567
7.3.3超媒体链的定位 571
7.3.4数据对象的设计 572
第八章 多媒体通信和分布式多媒体系统 575
8.1引言 575
8.2多媒体终端和视频会议系统 577
8.2.1视频会议系统的结构及标准 577
8.2.2综合业务多媒体终端的设计与实现 586
8.2.3多点控制单元的结构原理及会议控制 608
8.2.4视频会议系统的资源管理 622
8.2.5视频会议系统的安全保密 633
8.3.1引言 637
8.3多媒体交互式电视技术 637
8.3.2分布式多媒体和交互式电视技术 643
8.3.3交互式电视系统的功能和结构 647
8.3.4视频服务器的结构和设计 652
8.3.5交互式电视机顶盒的结构和设计 663
8.4计算机支持的协同工作—CSCW 671
8.4.1 CSCW系统概述 671
8.4.2 CSCW的系统结构 681
8.4.3 CSCW系统支撑环境TH-SECSCW的设计和实现 688
8.4.4 CSCW系统示例—TH-DMCW 700