更改

一般的，称满足上述性质的矩阵为'''随机矩阵（stochastic matrix）'''。

一般的，称满足上述性质的矩阵为'''随机矩阵（stochastic matrix）'''。

====可达、互通与可约性====

=====可达、互通与可约性=====

下面举一个简单的例子具体观察状态间的转移行为，下图中(a)和(b)分别为马尔科夫链的转移概率矩阵和图表示。

下面举一个简单的例子具体观察状态间的转移行为，下图中(a)和(b)分别为马尔科夫链的转移概率矩阵和图表示。