5,443
个编辑
更改
跳到导航
跳到搜索
小第50行：
第50行： − 转移概率描述了状态之间的可达性大小，能够借助这种可达性对状态空间进行一种划分？首先，给出可达的严格定义。+
→状态分类
===状态分类===
===状态分类===
转移概率描述了状态之间的可达性大小，能否借助这种可达性对状态空间进行一种划分？首先，给出可达的严格定义。
<math>\exists n\geq 0,\ \ P_{ij}(n)>0</math>，则称状态<math>i</math>可达状态<math>j</math>，记为<math>i\to j</math>。易知，可达是传递关系，即
<math>\exists n\geq 0,\ \ P_{ij}(n)>0</math>，则称状态<math>i</math>可达状态<math>j</math>，记为<math>i\to j</math>。易知，可达是传递关系，即