更改

==历史发展==

==历史发展==

1906年，俄罗斯数学家Andrey Andreyevich Markov在研究大数定律时，首次定义了离散随机序列在给定现在的条件下，过去与未来的条件独立性，即马尔科夫性

1906年，俄罗斯数学家Andrey Andreyevich Markov在研究大数定律时，首次定义了离散随机序列在给定现在的条件下，过去与未来的条件独立性，即马尔科夫性

<ref name=":3">Markov A A．Rasprostranenie zakona bol’shih chisel na velichiny, zavisyaschie drug ot druga．Izvestiya Fiziko-matematicheskogo obschestva pri Kazanskom universitete, 1906, 15: 135-156.</ref>。随后，Andrey Markov基于普希金的长诗《叶甫盖尼・奥涅金》研究了俄语字母序列上的马尔科夫链及其极限分布<ref name=":4">Markov A A. Issledovanie statističeskich zakonov vjumel’nogo jazika (Analysis of statistical laws in the verse language). Trudy Imperatorskogo S.-Peterburgskogo Mineralogičeskogo Obščestva, 2nd series, 1913, 42, 153–162.</ref>。1931年，Kendall等人将其推广至连续时间马尔可夫链并建立了相应理论<ref name=":5">Kendall D G, Batchelor G K, Bingham N H, Hayman W K, Hyland J M E, Lorentz G G, Moffatt H K, Parry W, Razborov A A, Robinson C A and Whittle P. Andrei Nikolaevich Kolmogorov (1903–1987). Bulletin of the London Mathematical Society, 1990, 22(1): 31-100.</ref>。

<ref name=":3">Markov A A．Rasprostranenie zakona bol’shih chisel na velichiny, zavisyaschie drug ot druga．Izvestiya Fiziko-matematicheskogo obschestva pri Kazanskom universitete, 1906, 15: 135-156.</ref>。随后，Andrey Markov基于普希金的长诗《叶甫盖尼・奥涅金》研究了俄语字母序列上的马尔科夫链及其极限分布<ref name=":4">Markov A A. Issledovanie statističeskich zakonov vjumel’nogo jazika (Analysis of statistical laws in the verse language). Trudy Imperatorskogo S.-Peterburgskogo Mineralogičeskogo Obščestva, 2nd series, 1913, 42, 153–162.</ref>。1931年，David George Kendall等人将其推广至连续时间马尔可夫链并建立了相应理论<ref name=":5">Kendall D G, Batchelor G K, Bingham N H, Hayman W K, Hyland J M E, Lorentz G G, Moffatt H K, Parry W, Razborov A A, Robinson C A and Whittle P. Andrei Nikolaevich Kolmogorov (1903–1987). Bulletin of the London Mathematical Society, 1990, 22(1): 31-100.</ref>。

==离散（或连续）时间马尔科夫链的定义==

==离散（或连续）时间马尔科夫链的定义==