更改

下面主要讨论离散时间时齐马尔科夫链。

下面主要讨论离散时间时齐马尔科夫链。

===转移过程===

===时齐马尔科夫链的转移过程===

====时齐性====

====多步转移概率的计算====

由时齐性假设，记一步转移概率

由时齐性假设，记一步转移概率

<math>P(X_n=j|X_{n-1}=i)=p_{ij}</math>。

<math>P(X_n=j|X_{n-1}=i)=p_{ij}</math>。