离散时间马尔可夫链的几个性质Read

1第二节离散时间马尔可夫链的几个性质1互通性2周期性3常返性4遍历性21.1互通性若对某一n1，有，则称系统X可以自状态I到达状态j，并记ij。如果ij，并且ji，则状态i与j互通，并记为ij若对一切n1，有或，或两式均成立，则称状态i与j不通()0npij()0npij()0pjin（书第18页）31.2互通性互通性的性质自反律：ii(假定每个状态0步转移到自己)对称律：ij当且仅当ji传递律：ik且kj，则ijiji与j不通ikji，j，...