5,443
个编辑
更改
跳到导航
跳到搜索
第6行：
第6行： −
→离散时间离散状态随机过程
其中，<math>X_n=j</math>表示过程在时刻<math>n</math>处于状态<math>i</math>，称<math>P(X_n=j|X_{n-1}=i)</math>为马尔可夫链的一步转移概率，并引入记号<math>P_{ij}(m,n)=P(X_n=j|X_m=i)</math>。
其中，<math>X_n=j</math>表示过程在时刻<math>n</math>处于状态<math>i</math>，称<math>P(X_n=j|X_{n-1}=i)</math>为马尔可夫链的一步转移概率，并引入记号<math>P_{ij}(m,n)=P(X_n=j|X_m=i)</math>。
注：马尔可夫过程是不限于离散时间或离散状态的，此处重点研究离散时间且离散状态
注：马尔可夫过程是不限于离散时间或离散状态的，此处重点研究离散时间且离散状态