第一篇 马尔可夫过程 1
第一章 离散时间马氏链 3
1.1 经济最优化的数学模型与马氏链 3
1.2 离散时间马氏链 常返性与遍历性 9
1.3 一般情形下的极限定理 20
1.4 若干判别准则 最小非负解 25
1.5 几个典型的离散时间马氏链 33
1.6 补充与习题 38
第二章 连续时间马氏链 47
2.1 连续时间参数马氏链 唯一性 47
2.2 常返性与遍历性 53
2.3 单生过程与生灭过程 60
2.4 分支过程与扩展的分支过程 67
2.5 补充与习题 71
第三章 可逆马氏链 77
3.1 可逆与可配称马氏链 77
3.2 谱隙估计 78
3.3 附录：可逆马氏链的谱表示 87
3.4 补充与习题 90
第四章 一般马氏过程 95
4.1 马氏性及其等价形式 95
4.2 强马氏性 99
4.3 附录：最优停止问题——女秘书问题 104
4.4 补充与习题 106
第二篇 随机分析 107
第五章 鞅论 109
5.1 定义及基本性质 109
5.2 Doob停止定理 110
5.3 基本不等式 113
5.4 收敛定理 115
5.5 连续参数鞅（上、下鞅） 120
5.6 鞅论应用两例 122
5.7 补充与习题 125
第六章 布朗运动 129
6.1 布朗运动 129
6.2 轨道性质 130
6.3 布朗运动的鞅性质 133
6.4 高维布朗运动 135
6.5 补充与习题 135
第七章 随机积分与扩散过程 139
7.1 随机积分 139
7.2 It？公式 143
7.3 随机微分方程 145
7.4 一维扩散过程 147
7.5 补充与习题 152
第八章 半鞅与随机积分 157
8.1 Doob-Meyer分解的唯一性 157
8.2 Doob-Meyer分解的存在性 159
8.3 变差过程的性质 162
8.4 随机积分 163
8.5 It？公式 167
8.6 局部鞅与半鞅 170
8.7 多元随机积分 172
8.8 随机微分方程（高维情形） 174
8.9 Feynman-Kac公式等三个数学工具 177
8.10 补充与习题 189
后记 195
参考文献 199
索引 205