更改

添加1,241字节 、 2025年1月4日 (六) 20:30
第258行: 第258行:  
[[马尔科夫链]]是指一个有<math>N</math>个离散状态的随机过程,在给定当前状态下,对于未来状态的预测便不再依赖于过去状态。在离散时间里,时间步之间的状态转移概率可以用一个状态转移概率矩阵<math>P</math>表示。该矩阵需满足马尔科夫条件,即每行加总等于1。
 
[[马尔科夫链]]是指一个有<math>N</math>个离散状态的随机过程,在给定当前状态下,对于未来状态的预测便不再依赖于过去状态。在离散时间里,时间步之间的状态转移概率可以用一个状态转移概率矩阵<math>P</math>表示。该矩阵需满足马尔科夫条件,即每行加总等于1。
   −
马尔科夫链的成块性[[Lumpability]]是一种描述马尔科夫链的状态是否可聚类的性质。Lump有‘块’的意思。判断一个马尔科夫链是否lumpable,是看它的马尔科夫状态转移矩阵这个大方块中的元素能不能结成一个个小方块。
+
马尔科夫链的成块性[[Lumpability]]是一种描述马尔科夫链的状态是否可聚类的性质。Lump有‘块’的意思。判断一个马尔科夫链是否lumpable,是看它的马尔科夫状态转移矩阵<math>P</math>这个大方块中的元素能不能结成一个个小方块。
   −
具体来说,对于成块的马尔科夫链来说,我们可以把<math>N</math>个微观状态划分成<math>M < N</math>个宏观状态,在这个划分过程中,我们能定义微观状态<math>s_1</math>到宏观状态<math>A_1</math>的转移概率就等于<math>s_1</math>到<math>A_1</math>中的各个微观状态的转移概率的加和。
+
具体来说,对于成块的马尔科夫链来说,我们可以把<math>N</math>个微观状态划分成<math>M < N</math>个宏观状态,在这个划分过程中,我们能定义微观状态<math>s_1</math>到宏观状态<math>A_1</math>的转移概率就等于<math>s_1</math>到<math>A_1</math>中的各个微观状态的转移概率的加和。我们会发现,在成块的马尔科夫链中,宏观状态中的每一个微观状态转移到另一个宏观状态的转移概率都是一样的。这样会使得马尔科夫状态转移概率矩阵<math>P</math>这个方阵中,出现一个个方块,所以称之为成块性。
   −
我们会发现,在成块的马尔科夫链中,宏观状态中的每一个微观状态转移到另一个宏观状态的转移概率都是一样的。这样会使得马尔科夫状态转移概率矩阵<math>P</math>这个方阵中,出现一个个方块,所以称之为成块性。
      +
因果态和成块性的区别主要有以下三点:
 +
 +
'''1. 马尔可夫性假设'''
 +
 +
因果态并没有马尔科夫性的假设,因为我们并没有对上述的<math>t</math>时刻的历史状态的过去状态<math>s_{t}</math>的长度做出限制。如果我们对系统做出符合<math>L-</math>阶马尔科夫性的假设,即只考虑长度为<math>L</math>的过去状态就能在完美定义未来状态<math>s_t</math>的分布,而不存在隐状态的话,我们才能进一步的比较因果态和成块性。
 +
 +
目前大部分关于成块性都是在一阶马尔科夫链的情况的,但我们也能拓展到<math>L-</math>阶马尔科夫性。最简单的方法是,对于一个有<math>N</math>个状态的<math>L-</math>阶马尔科夫链,我们可以把<math>L</math>个时间步的状态序列压缩成一步的<math>N^L</math>个状态,并对这<math>N^L</math>个状态进行划分。
 +
 +
'''2. 微观和宏观最大预测性'''
 +
 +
当我们经过上述的假设和处理后,我们就能比较因果态和成块性了。
 +
 +
上文提到,因果态的状态划分方式能保持微观层面上的最大预测性。也就是说,我们根据微观状态找到对应的因果态之后,即使我们不知道原本的微观状态了,我们还是能准确的得到未来的'''微观'''状态的分布。
 +
 +
而成块性与其不同的是,我们根据微观状态找到对应的宏观状态之后,我们能够准确的得到未来的'''宏观'''状态的分布,但是无法再还原到微观状态了。
 +
 +
所以,因果态同时保持了微观和宏观的最大预测性,而成块性只能保持宏观的最大预测性。
 +
 +
'''3. 因果态比成块性更严格,存在因果态是马尔科夫链成块的充分条件'''
   −
因果态和成块性的区别主要有以下三点:
+
按照上面的叙述,我们会发现,因果态是比成块性更严格的限制,因为它要求在状态转移矩阵中,属于同一个因果态中的状态的行必须完全一致。
 +
 
 +
存在因果态是马尔科夫链成块的充分条件,或者说,因果态的划分是一种成块的状态划分。
   −
# 因果态并没有马尔科夫性的假设,而成块性是马尔科夫链的一个性质,只能应用在马尔科夫链上。
+
因为因果态比成块性更严格,会出现我们能对因果态继续聚类得出更化简的成块划分的情况。
−
# 我们也能在马尔科夫链上定义因果态,然后比较因果态和成块性。我们会发现,因果态是比成块性更严格的限制,因为它要求的是在<math>P</math>中的同一个因果态中的状态的行必须完全一致。存在因果态是马尔科夫链成块的充分条件,或者说,因果态的划分是一种成块的状态划分。因为因果态比成块性更严格,会出现我们能对因果态继续聚类得出更化简的成块划分的情况。
  −
# 继续比较马尔科夫链的因果态和成块划分的话,我们还能看到,成块性保证了在聚类到宏观后,能保留宏观状态的所有信息。而因果态强调的是,在聚类中,不仅保留了宏观状态的信息,还能保留微观状态的信息。
      
===斑图重构机器与世界模型===
 
===斑图重构机器与世界模型===
812

个编辑