汉语名词短语和动词短语的自动识别方法研究PDF电子书下载

第1章 引论 1

1.1 课题的提出 1

1.2 面向计算机的语言学研究工作的模式 2

1.3 开展本课题研究工作的基础 4

1.3.1 研究意义 4

1.3.2 研究难点 8

1.3.3 国内外研究动态 14

1.4 本书的结构安排 20

第2章 汉语的计算机理解 23

2.1 汉语的特点 23

2.2 汉语理解中的特殊问题 24

2.2.1 汉语句子的歧义切分问题 24

2.2.2 未登录词问题 25

2.2.3 谓语的组成问题 26

2.2.4 多动词联用问题 26

2.2.5 词性歧义问题 27

2.2.6 主语和施事问题 27

2.2.7 否定词和语义上的混论 28

2.2.8 形态变化问题 28

2.2.9 句子的词序问题 28

2.2.10 汉语的特殊模式问题 29

2.2.11 汉语的歧义结构 30

2.3 小结 31

第3章 汉语短语的基本知识 32

3.1 汉语短语的标注体系 32

3.2 短语的组成定义 36

3.3 短语的句法功能分类框架 37

3.4 小结 42

第4章 基于规则的汉语短语识别 44

4.1 汉语短语np、vp结构的统计与分析 44

4.1.1 汉语短语np的统计与分析 44

4.1.2 汉语短语vp的统计与分析 47

4.2 汉语短语np、vp识别的定界规则 52

4.2.1 获取上下文规则的必要性 52

4.2.2 名词短语np定界规则的确定 52

4.2.3 动词短语vp定界规则的确定 54

4.2.4 上下文规则的获取 54

4.3 汉语短语np、vp的句法语义分析 56

4.3.1 汉语短语np的句法语义分析 56

4.3.2 汉语短语vp的句法语义分析 73

4.4 基于规则的汉语短语np、vp的自动识别 106

4.4.1 识别算法 106

4.4.2 实验系统 106

4.4.3 实验数据分析 107

4.5 小结 108

第5章 基于HMM的名词短语识别 112

5.1 相关技术介绍 112

5.1.1 HMM简介 112

5.1.2 层次分析法介绍 117

5.2 相关资源建设 120

5.2.1 资源建设方法 120

5.2.2 资源组成 120

5.2.3 资源建设 122

5.3 HMM模型的设计 125

5.3.1 HMM模型的建立 125

5.3.2 HMM模型的参数估计 128

5.3.3 NP识别过程 129

5.4 模型的实验与结果分析 136

5.4.1 系统总体设计框图 136

5.4.2 主要模块的算法设计 137

5.4.3 总体算法流程图 139

5.4.4 实验结果与分析 140

5.5 小结 144

第6章 基于SVM的动词短语识别 146

6.1 支持向量机介绍 146

6.1.1 引言 146

6.1.2 SVM简介 147

6.2 现代汉语动词短语相关知识介绍 158

6.2.1 动词短语简介及其分类 158

6.2.2 用于VP识别的词语句法属性集合的确定 159

6.2.3 语料选取 160

6.2.4 动词短语最佳观察窗口的确定 161

6.2.5 动词短语的分析 162

6.3 动词短语特征提取 162

6.3.1 静态特征提取 162

6.3.2 动态特征提取 163

6.4 动词短语向量空间模型的建立 165

6.5 基于SVM的动词短语识别 167

6.5.1 构造SVM分类器 167

6.5.2 基于SVM的动词短语识别 168

6.6 实验模型及结果分析 169

6.6.1 子语料的形成 169

6.6.2 基于SVM的动词短语识别方法实验系统及结果分析 170

6.7 小结 174

第7章 短语结构歧义类型与消解策略分析 175

7.1 从计算机处理的角度看汉语短语结构歧义 175

7.2 包含终结符的歧义格式与不包含终结符的歧义格式 177

7.3 外显型歧义格式与内含型歧义格式 179

7.4 真歧义格式、准歧义格式、伪歧义格式 181

7.5 短语结构歧义的消解策略分析 183

7.5.1 短语结构歧义的消解策略概述 183

7.5.2 短语结构歧义的消解方法及举例 185

7.6 小结 191

第8章 关于短语识别的评测问题 193

8.1 评测在软件开发中的位置 193

8.1.1 引言 193

8.1.2 评测在软件开发过程中的位置 195

8.1.3 ISO 9126标准 196

8.2 评测模型的定义 197

8.2.1 评测中的主要概念——形式和自动化概述 197

8.2.2 参数化测试台（PTB） 198

8.3 短语识别的评测框架及部分实现 199

8.3.1 属性集 199

8.3.2 需求 199

8.3.3 方法 200

8.3.4 测量 200

8.3.5 翻译评测的度量 201

8.3.6 评测过程 202

8.3.7 分词与词性标注自动评测系统 203

8.3.8 短语分析评测标准及其度量方式 207

8.3.9 测试结果提交格式 209

8.4 小结 211

第9章 结语 212

9.1 对本课题研究工作的总结 212

9.2 规则方法与统计方法的比较 217

9.3 进一步的研究计划 226

附录1 符号代码说明 228

附录2 《现代汉语语法信息词典》动词库专有项目 230

附录3 SMO算法的伪码 233

附录4 现代汉语短语结构歧义格式举例 236

附录5 测试句样例 239

参考文献 243

后记 247