更改

记使得转移概率<math>P_{ii}(n)>0</math>的转移步数<math>n</math>所组成的集合为<math>A_i=\{n:n\geq1,P_{ii}(n)>0\}</math>。若<math>A_i</math>非空，则称其最大公约数为状态<math>i</math>的周期，记为<math>d_i</math>。若<math>d_i>1</math>，称<math>i</math>是'''周期的'''；若<math>d_i=1</math>，称<math>i</math>是'''非周期的'''。

记使得转移概率<math>P_{ii}(n)>0</math>的转移步数<math>n</math>所组成的集合为<math>A_i=\{n:n\geq1,P_{ii}(n)>0\}</math>。若<math>A_i</math>非空，则称其最大公约数为状态<math>i</math>的周期，记为<math>d_i</math>。若<math>d_i>1</math>，称<math>i</math>是'''周期的'''；若<math>d_i=1</math>，称<math>i</math>是'''非周期的'''。

另一方面，根据<math>n</math>步转移概率矩阵可知，<math>P_{ii}(n)</math>序列为<math>0,1,0,1,\ldots</math>，<math>P_{ij}(n)</math>序列为<math>1,0,1,0\ldots</math>，四个转移概率均不存在极限，即转移矩阵没有极限。由此可见，周期性对于转移矩阵是否具有极限的判断起着重要的作用。

另一方面，根据<math>n</math>步转移概率矩阵可知，<math>P_{ii}(n)</math>序列为<math>0,1,0,1,\ldots</math>，<math>P_{ij}(n)</math>序列为<math>1,0,1,0\ldots</math>，四个转移概率均不存在极限，即转移矩阵没有极限。由此可见，周期性对于转移矩阵是否具有极限的判断起着重要的作用。