提取马尔可夫子链
状态j
是可获得的从国家我
如果有一个非零的概率我
来j
在有限的步骤中。子链
通过形成相关有向图的传递闭包来确定可达性,然后枚举一步转换。
子链在可达性下是封闭的,以保证的转移矩阵sc
保持随机(即行和为1
),其转移概率与中的转移概率相同mc.P
.
如果您在循环通信类中指定一个状态,那么子链
摘录了整个交流类。如果在瞬态通信类中指定一个状态,则子链
从瞬态类中提取瞬态类和所有可访问的类。要提取单链,请在每个组件瞬态类中指定一个状态。看到分类
.
[1]Gallager, R.G.随机过程:应用理论。英国剑桥:剑桥大学出版社,2013。
[2]霍恩和c.r.约翰逊。矩阵分析。英国剑桥:剑桥大学出版社,1985。