第1章 引论 1
1.1 多媒体概念 1
1.1.1 多媒体的含义与类型 2
1.1.2 多媒体的关键技术 3
1.1.3 多媒体的主要应用 5
1.2 信息检索概念 7
1.2.1 信息检索概述 7
1.2.2 信息检索技术 9
1.2.3 信息检索系统 10
1.3 基于内容检索系统概念 12
1.3.1 基于内容检索系统的体系结构 12
1.3.2 基于内容检索系统的关键技术 13
1.4 本章小结 14
参考文献 15
第2章 多媒体信息的类型与格式 16
2.1 数字文本的类型与格式 16
2.1.1 数字文本概述 16
2.1.2 数字文本的常见文件格式 17
2.2 数字音频的类型与格式 24
2.2.1 声音概述 25
2.2.2 数字音频概述 27
2.2.3 数字音频的常见文件格式 29
2.3 数字图像的类型与格式 39
2.3.1 数字图像概述 39
2.3.2 数字图像的相关概念 43
2.3.3 数字图像的常见文件格式 47
2.4 数字视频的类型与格式 52
2.4.1 数字视频概述 52
2.4.2 数字视频的常见文件格式 54
2.5 数字动画的类型与格式 58
2.5.1 动画概述 58
2.5.2 数字动画概述 58
2.5.3 数字动画的常见文件格式 59
2.6 本章小结 61
参考文献 61
第3章 基于内容的文本索引与检索 63
3.1 基于内容的文本索引技术 63
3.1.1 倒排文档技术 63
3.1.2 后缀树技术 67
3.1.3 签名档技术 70
3.1.4 高维索引技术 71
3.2 基于内容的文本检索模型 72
3.2.1 检索模型概述 72
3.2.2 布尔检索模型 73
3.2.3 向量空间模型 74
3.2.4 概率检索模型 76
3.2.5 结构化检索模型 76
3.2.6 浏览检索模型 77
3.3 基于内容的文本检索系统 79
3.3.1 文本检索系统概述 79
3.3.2 全文信息检索系统 81
3.3.3 网络信息检索系统 85
3.3.4 Web搜索引擎简介 90
3.4 本章小结 94
参考文献 94
第4章 基于内容的音频索引与检索 96
4.1 音频信息的索引与检索 96
4.1.1 音频检索概述 96
4.1.2 音频检索一般过程 97
4.1.3 基于声学特征的音频处理 99
4.2 音乐信息检索 106
4.2.1 音乐的符号表示 107
4.2.2 音乐特征 107
4.2.3 从声音特征到音乐特征 110
4.2.4 音乐信息检索概述 111
4.2.5 相似性度量 112
4.2.6 音乐信息索引方式 117
4.2.7 音乐信息检索评价 119
4.2.8 音乐信息检索研究概况 120
4.3 基于内容的音乐检索系统 122
4.3.1 常见的音乐信息检索系统 122
4.3.2 MIRtoolbox音乐检索工具 124
4.4 本章小结 130
参考文献 130
第5章 基于内容的图像索引与检索 133
5.1 基于内容的图像索引技术 134
5.1.1 图像颜色特征 134
5.1.2 图像纹理特征 136
5.1.3 图像形状特征 138
5.1.4 图像空间关系特征 141
5.1.5 基于对象特征的检索 142
5.2 基于内容的图像检索技术 142
5.2.1 基于图例的图像检索方法 142
5.2.2 图像相似度的比较方法 144
5.2.3 相关反馈 146
5.2.4 查询向量相关反馈 147
5.3 基于内容的图像检索系统 152
5.3.1 QBIC 152
5.3.2 IMEDIA 156
5.3.3 其他图像检索系统 160
5.3.4 Internet图像浏览检索系统 162
5.4 本章小结 163
参考文献 163
第6章 基于内容的视频索引与检索 166
6.1 基于内容的视频索引技术 166
6.1.1 基本概念 166
6.1.2 视频索引方式 168
6.1.3 视频数据库索引方式 177
6.2 基于内容的视频检索技术 180
6.2.1 基于内容的视频检索过程 180
6.2.2 基于内容的自动视频检索 183
6.2.3 基于内容的交互式视频检索 185
6.2.4 基于内容的视频检索系统架构 186
6.3 基于内容的视频检索系统 187
6.3.1 基于内容的视频检索系统发展史 187
6.3.2 基于内容的视频检索系统——VideoQ 188
6.3.3 基于内容的视频数据库查询系统——JACOB 192
6.3.4 基于内容的视频数据库查询系统——QBIC 193
6.3.5 Web视频检索 194
6.4 本章小结 198
参考文献 199
第7章 基于内容的多媒体信息融合索引与检索 200
7.1 基于内容的多媒体信息融合分析与索引概述 200
7.1.1 多媒体信息特征融合技术 201
7.1.2 单媒体信息交叉索引技术 202
7.1.3 多媒体信息结果融合技术 203
7.2 基于内容的多媒体信息融合检索技术 204
7.2.1 多媒体信息分析步骤 204
7.2.2 多媒体信息特征提取 204
7.2.3 多媒体数据流分割 206
7.2.4 多媒体识别分类 207
7.3 基于内容的多媒体信息融合检索系统 208
7.3.1 文本与图像信息融合检索系统 208
7.3.2 文本与音频信息融合检索系统 210
7.3.3 文本与视频信息融合检索系统 211
7.3.4 万维网多媒体信息检索系统 214
7.4 本章小结 217
参考文献 217
第8章 基于GIFT的图像检索系统的设计与实现 219
8.1 GIFT系统体系结构 219
8.1.1 GIFT两层体系结构 219
8.1.2 查询处理模块 221
8.1.3 特征提取与索引 222
8.1.4 GIFT查询过程 222
8.1.5 配置GIFT 223
8.2 多媒体检索标记语言 224
8.2.1 MRML概述 224
8.2.2 MRML查询传输机制设计 225
8.2.3 扩展MRML 227
8.3 利用倒排文档处理示例查询 228
8.3.1 灵活索引结构的必要性 228
8.3.2 倒排文档和概率加权 229
8.3.3 从文本检索到图像检索 232
8.3.4 BNUQ系统中使用的特征集合 235
8.4 查询引擎BNUQ的设计与实现 237
8.4.1 BNUQ的设计 237
8.4.2 BNUQ的实现 238
8.4.3 在GIFT中配置BNUQ 242
8.4.4 查询实验 243
8.5 GIFT平台的改进 246
8.5.1 GIFT项目的缺陷 246
8.5.2 运行时索引图片集功能的设计 246
8.5.3 客户端软件的改造 249
8.6 本章小结 250
参考文献 251