更改

本词条主要参考北京大学李东风老师的应用随机过程讲义<ref name=":1">李东风. 应用随机过程, 2024, 163-215. https://www.math.pku.edu.cn/teachers/lidf/course/stochproc/stochprocnotes/html/_book/StocProc.pdf</ref>进行相关概念的梳理。

马尔科夫过程是一类特殊的随机过程，在给定当前状态下，对于未来状态的预测便不再依赖于过去状态。马尔科夫链是一种应用十分广泛的马尔科夫过程，能够用于描述天气变化和基因调控等现象。本词条主要参考北京大学李东风老师的应用随机过程讲义<ref name=":1">李东风. 应用随机过程, 2024, 163-215. https://www.math.pku.edu.cn/teachers/lidf/course/stochproc/stochprocnotes/html/_book/StocProc.pdf</ref>对相关基础概念进行梳理，为后续相关应用做铺垫。

==基本概念==

==基本概念==

===离散（或连续）时间马尔科夫链===

===离散（或连续）时间马尔科夫链===

马尔科夫过程是一类特殊的随机过程，在给定当前状态下，对于未来状态的预测便不再依赖于过去状态。下面介绍两种简单类型的马尔科夫过程，离散时间马尔科夫链（简称马尔科夫链，Markov chain）以及连续时间马尔科夫链。

下面介绍两种简单类型的马尔科夫过程，离散时间马尔科夫链（简称马尔科夫链，Markov chain）以及连续时间马尔科夫链。