第1章 绪论 1
1.1为什么美国国防部需要试验 1
1.2需要一套最佳规程 1
1.3范围与重点 2
1.4本书的内容安排 2
第2章 转型与试验 5
2.1转型与网络中心战(NCW) 5
2.2网络中心战与试验 5
2.3网络中心战原则 6
2.4网络中心战中的各个域 7
2.5基于概念重在任务能力的试验 8
第3章 试验概述 12
3.1试验用途 12
3.2综合试验 15
3.3综合试验背景下的探索发现试验 17
3.4综合试验背景下的假设检验试验 19
3.5综合试验背景下的演示验证试验 22
3.6精心设计的综合试验的结果 23
3.7大型现场试验同时发生并不是综合试验 23
3.8试验的核心挑战 24
第4章 综合试验的逻辑 26
4.1为什么要采用综合试验而不是多个单项试验 26
4.2综合试验需要不同的思维方式 27
4.3综合试验基本结构 31
4.3.1知识成熟度 31
4.3.2试验场景的逼真度 33
4.3.3问题的复杂性 36
4.4设计综合试验 37
4.5结论 38
第5章 试验剖析 39
5.1试验的阶段 39
5.2试验前阶段 40
5.3试验规划 42
5.3.1规划探索发现试验 43
5.3.2规划假设检验试验 44
5.3.3规划演示验证试验 45
5.3.4初始试验模型的表达 45
5.4建立试验团队 46
5.4.1制订初步试验计划 46
5.4.2初始研究设计 47
5.4.3变量 47
5.4.4基线和处理活动 51
5.4.5采样规模 51
5.4.6试验计划草案 53
5.4.7主体 54
5.4.8想定 58
5.4.9观测和数据采集 59
5.4.10可行性审查和探索性建模 60
5.5详细试验计划 61
5.5.1试验基础设施的规划 61
5.5.2控制可控量 62
5.5.3控制外因影响 62
5.5.4数据采集和分析计划 63
5.6试验实施阶段 64
5.7建立试验环境 64
5.8预演或预测试 65
5.8.1训练 66
5.9实施试验 67
5.10试验后阶段 71
5.11数据分析 72
5.12综合试验结果 74
5.13解释结果 74
5.13.1分发结果草案 75
5.13.2利用建模和仿真验证并推广研究结果 75
5.13.3产物的修订 76
5.14数据和产物的归档和分发 76
5.15支持试验的建模和仿真 77
第6章 试验规划 81
6.1重点 81
6.2命题和假设 81
6.3制定一系列好的命题和假设 82
6.4在自同步试验中为探索发现试验制定的命题 83
6.5初始模型及其应用 85
6.5.1最初的描述性模型 85
6.5.2自同步示例试验的描述模型 85
6.6初始可执行模型 86
6.7自同步试验的可执行模型 87
6.8理想的与现实的转型试验比较 88
6.9理想的试验 89
6.10试验原则 91
6.11转型试验实际情况 96
第7章 测量和度量 99
7.1重点 99
7.2定义 99
7.2.1属性 99
7.2.2测量 100
7.2.3度量 100
7.2.4指标 100
7.2.5测量级别 101
7.3测量和度量准则 103
7.3.1有效性 103
7.3.2可靠性 104
7.3.3可信性 105
7.3.4对三个准则的需求 106
7.4测量和度量选择过程 106
7.4.1依靠初始模型 106
7.4.2因变量优先 107
7.4.3因变量和中间变量 109
7.4.4可行性测试:数据分析和数据采集计划 109
7.5现有的测量和度量系统 110
7.5.1网络中心战价值链 110
7.5.2面向效果的测量和度量 112
7.5.3司令部效能评估工具(HEAT) 113
7.6应用示例:自同步试验 115
7.6.1因变量:有效的自同步 115
7.6.2自变量 118
7.6.3中间变量 122
7.7结论 125
第8章 试验想定 126
8.1什么是试验想定 126
8.2转型试验中的想定 126
8.2.1无单一想定 127
8.2.2定义想定空间 127
8.2.3选择“关注范围” 130
8.2.4确定试验粒度 131
8.2.5驱动数据采集和分析 133
8.3想定的选择、修改与创建 133
8.3.1想定的选择 134
8.3.2想定的修改 135
8.3.3想定的创建 136
8.4示例:自同步试验 137
8.5结论 139
第9章 数据分析和采集计划 140
9.1数据分析和采集计划的目的 140
9.2数据分析计划和数据采集计划之间的关系 140
9.3数据分析计划 141
9.3.1单变量的描述性分析 142
9.3.2关系的双变量分析 144
9.3.3多变量分析 147
9.3.4与数据分析计划的结合 149
9.4数据采集计划 149
9.4.1自动采集 151
9.4.2后期数据化简记录 151
9.4.3调查 153
9.4.4试验主体测试 154
9.4.5人为观察 155
第10章 试验的实施 157
10.1目的 157
10.2预测试 157
10.2.1范围 157
10.2.2进度 158
10.2.3训练 159
10.2.4对详细试验计划的修订 159
10.3预试验数据采集 159
10.3.1处理 159
10.3.2归档 160
10.3.3数据完整性和隐私保护 160
10.4训练 161
10.4.1观察者和控制者 161
10.4.2试验主体 162
10.5与观察者和控制者一起工作 163
10.5.1无干预 164
10.5.2轮班计划 164
10.5.3关于覆盖范围 164
10.5.4监管 165
10.6数据采集 165
10.6.1自动采集 165
10.6.2质量控制 166
10.6.3异常管理 167
10.6.4主体离开 167
10.6.5观察者或控制者离开 167
10.6.6系统问题与故障 168
10.6.7数据污染 168
10.7数据获取和归档 168
10.7.1数据保存 168
10.7.2数据化简 169
10.8实施过程中的报告与快速查看报告 170
10.9实例:自同步试验 171
第11章 试验的产物 173
11.1文档产物的类型及其使用 173
11.1.1管理计划 174
11.1.2试验计划 174
11.1.3会议计划 176
11.1.4定期进度报告 176
11.1.5适当时候的建模与仿真报告 177
11.1.6初步结论报告 177
11.1.7报告结论 178
11.1.8报告解释 178
11.1.9分发初步结论报告 179
11.1.10供外部读者使用的最终产物 179
11.2为后续研究对试验归档 180
11.2.1原始数据记录、抄本等 182
11.2.2数据字典、术语表、构想和首字母缩写词 182
11.2.3方法学和度量字典 183
11.3重点考虑:产物及其分发 183
11.3.1试验类型决定产物关注点 184
11.3.2任务能力包的报告作用 185
11.3.3为所有证据编制文档 186
11.3.4为不同关注方裁剪试验产物 188
11.4对综合试验归档 190
11.5结论 191
第12章 基于模型的试验 192
12.1概述 192
12.2基于模型的试验过程 194
12.3试验前阶段 195
12.4可执行模型(仿真) 198
12.5实施试验 199
12.6试验后阶段 200
12.7分析 201
12.8非直观模型结果 202
12.9基于模型试验中的问题 203
12.9.1模型有效性 203
12.9.2不确定性 204
12.9.3同行评审 205
12.10结论 205
第13章 试验风险:普遍问题与潜在隐患 207
13.1目的 207
13.2试验环境的缺陷 208
13.3资源的缺乏 210
13.4规划的缺陷 211
13.5项目计划的缺陷 213
13.6测量和分析问题 215
13.7试验后问题 218
13.8综合试验的问题 218
13.9结论 219
附录A 认知域内性能和效果的测量 221
A.1引言 221
A.2行为观察和评价尺度 221
A.3关键事件框架 224
A.4统计推理在认知性能的测量和建模中的作用 225
附录B 测量层次 232
B.1引言 232
B.2实时信息和知识 233
B.3专家知识、信念、文化与经验 234
B.4个体感知与理解 235
B.5协作 236
B.6共享感知和理解 237
B.7决策 237
B.8军事力量要素同步 239
B.9军事使命任务效果 240
B.10策略效果 241
附录C 建模与仿真概述 242
C.1引言 242
C.2建模与仿真概述 243
C.2.1模型类型 243
C.2.2静态模型 244
C.2.3动态模型(仿真) 245
C.2.4构造性战斗仿真 245
C.2.5可执行体系结构(过程模型) 246
C.2.6面向主体的建模 246
C.2.7建模和仿真底层框架(工程) 247
C.2.8模型“转换器” 248
C.2.9性能模型和效果模型的连接 248
C.3指挥与控制建模指南 249
C.4指挥与控制建模中的问题 251
C.4.1人员行为的表述:基于规则、算法或“人在回路” 252
C.4.2单一模型与层次或联合模型 253
C.4.3随机模型与确定模型 254
C.4.4敌方描述 255
C.4.5验证、确认与认证 255
附录D 态势感知问题调查表 256