更改

其中，<math>P(n)</math>称为<math>n</math>步转移概率矩阵，<math>P</math>称为'''一步转移概率矩阵（transition probability matrix, TPM）'''，下面简称为转移概率矩阵。

其中，<math>P(n)</math>称为<math>n</math>步转移概率矩阵，<math>P</math>称为'''一步转移概率矩阵（transition probability matrix, TPM）'''，下面简称为转移概率矩阵。

通过观察可知，矩阵<math>P</math>满足如下性质

通过观察可知，矩阵<math>P</math>满足如下性质

一般的，称满足上述性质的矩阵为'''随机矩阵（stochastic matrix）'''。

一般的，称满足上述性质的矩阵为'''随机矩阵（stochastic matrix）'''。

下面举一个简单的例子具体观察状态间的转移行为，下图中(a)和(b)分别为马尔科夫链的转移概率矩阵和图表示。

下面举一个简单的例子具体观察状态间的转移行为，下图中(a)和(b)分别为马尔科夫链的转移概率矩阵和图表示。