− | 所谓的马尔可夫动力学是指系统的下一时刻状态只依赖于上一时刻的状态,并且与再之前的状态无关。马尔可夫动力学可以区分为离散时间、连续时间,离散状态、连续状态,以及它们的组合等多种。例如,如下的概率转移矩阵就定义了一个离散状态、离散空间上的马尔可夫动力学:
| + | 所谓的马尔可夫动力学是指系统的下一时刻状态只依赖于上一时刻的状态,并且与再之前的状态无关。马尔可夫动力学可以区分为离散时间、连续时间,离散状态、连续状态,以及它们的组合等多种。例如,如下的概率转移矩阵就定义了一个离散状态、离散空间上的马尔可夫动力学<math>P(S_{t+1}|S_{t})</math>: |