本书是一本随机过程的优秀教材，不仅以浅显易懂的语言阐述基本概念和方法，而且通过一些非常基础的应用实例，让读者了解如何应用随机过程理论解决实际问题。主要内容包括有限马尔可夫链、可数马尔可夫链、连续时间马尔可夫链、最优停时、鞅、可逆马尔可夫链、布朗运动和随机积分等. 本书侧重数学思想的分析而不是具体细节的理论证明，所需的数学基础只是本科程度的概率论和一些线性代数知识，而不需要读者有测度论的基础，适合作为高等院校数学及相关专业高年级本科生和研究生教材，也适合作为相关领域研究人员的参考书.