[[马尔科夫链]]是一类特殊的随机过程,在给定当前状态下,对于未来状态的预测便不再依赖于过去状态。它可以看作一个n维的状态的序列<math>\{s^{(1)}, s^{(2)}, ... , s^{(t)}\}</math>,其中每一步的状态转换都有马尔科夫矩阵(满足每一行和为1的条件的方阵)<math>P</math>决定,即<math>p(s^{(t+1)}) = p(s^{(t)}) P</math>。 | [[马尔科夫链]]是一类特殊的随机过程,在给定当前状态下,对于未来状态的预测便不再依赖于过去状态。它可以看作一个n维的状态的序列<math>\{s^{(1)}, s^{(2)}, ... , s^{(t)}\}</math>,其中每一步的状态转换都有马尔科夫矩阵(满足每一行和为1的条件的方阵)<math>P</math>决定,即<math>p(s^{(t+1)}) = p(s^{(t)}) P</math>。 |