第1章 绪论 1
1.0引言 1
1.1人类认知基本理论 1
1.2跨媒体信息基本概念 2
1.2.1多媒体基本概念 2
1.2.2基于内容的多媒体检索 3
1.2.3跨媒体信息定义与特性 5
1.3信息融合与分析 5
1.4跨媒体信息检索 8
1.5跨媒体信息应用 9
1.6本章小结 9
参考文献 9
第2章 文本信息检索基础 11
2.0引言 11
2.1信息检索 11
2.1.1基本概念 11
2.1.2基本过程 12
2.1.3信息检索评估 13
2.2信息检索建模 15
2.2.1模型抽象 15
2.2.2模型分类 15
2.2.3若干概念 17
2.3经典模型 18
2.3.1布尔模型 18
2.3.2词项加权与TF-IDF方法 19
2.3.3向量模型 20
2.3.4概率模型 21
2.3.5模型比较 22
2.4信息检索要素 23
2.4.1文档 23
2.4.2标记 23
2.4.3组织 25
2.4.4查询 25
2.5互联网信息搜索 32
2.5.1互联网信息搜索面临的挑战 32
2.5.2互联网结构 33
2.5.3搜索引擎架构 35
2.6本章小结 38
参考文献 39
第3章 语音信号处理基础 40
3.0引言 40
3.1语音信号特征 40
3.1.1语音信号时域特征 41
3.1.2语音信号频域特征 45
3.2语音编码技术 47
3.2.1应用模式 47
3.2.2编码技术 48
3.2.3评价方法 49
3.2.4波形编码 49
3.2.5参数编码 54
3.3语音识别技术 59
3.3.1基本框架 59
3.3.2特征提取 61
3.3.3统计模型 62
3.3.4动态时间规划算法 64
3.4语音合成和增强技术 65
3.4.1语音合成技术 65
3.4.2语音增强技术 69
3.5本章小结 76
参考文献 76
第4章 图像信号处理基础 78
4.0引言 78
4.1图像信号特征 78
4.2图像变换 79
4.2.1傅里叶变换 80
4.2.2快速傅里叶变换 81
4.2.3沃尔什变换 84
4.2.4离散余弦变换 86
4.2.5其他变换 86
4.3图像增强 88
4.3.1空间域变换增强 89
4.3.2空间域滤波增强 90
4.4图像编码 93
4.4.1图像编码基础 93
4.4.2熵编码 94
4.4.3行程编码 96
4.4.4预测编码 97
4.5图像检索 98
4.5.1图像检索的发展 98
4.5.2图像检索系统结构 99
4.5.3基于内容的图像检索 99
4.6本章小结 101
参考文献 102
第5章 跨媒体信息表示 103
5.0引言 103
5.1跨媒体信息特征 103
5.2跨媒体信息度量 104
5.2.1跨媒体信息表示 104
5.2.2跨媒体信息检索排序 113
5.2.3跨媒体信息降维处理 116
5.3跨媒体信息相关性度量 120
5.3.1针对聚类特征的度量 120
5.3.2针对MMDSS的度量 122
5.4其他跨媒体信息表示方法 123
5.5本章小结 124
参考文献 124
第6章 多媒体与跨媒体信息处理 127
6.0引言 127
6.1音频信息处理 128
6.1.1音频的处理与分析 128
6.1.2语音的索引与检索 133
6.2视觉信息处理 135
6.2.1图像信息的检索 136
6.2.2视频信息的检索 142
6.2.3视觉信息的高层语义特征提取 143
6.3跨媒体信息理解 145
6.3.1跨媒体语义 145
6.3.2跨媒体信息理解 147
6.4跨媒体信息检索 149
6.4.1跨媒体信息的索引与检索 149
6.4.2跨媒体信息的检索框架 150
6.5本章小结 156
参考文献 156
第7章 跨媒体信息系统 159
7.0引言 159
7.1跨媒体信息系统结构 159
7.2基于数字图书馆的跨媒体信息检索系统 160
7.2.1系统原理与功能简介 160
7.2.2基于数字图书馆的跨媒体信息检索平台 164
7.3基于医学图像的跨媒体信息检索系统 165
7.3.1系统原理与功能简介 165
7.3.2基于医学图像的跨媒体信息检索平台 166
7.4基于生物学的跨媒体信息检索系统 168
7.4.1系统原理与功能简介 168
7.4.2基于生物特征检索的跨媒体信息检索平台 170
7.5本章小结 172
参考文献 172