从一个状态出发,还会不会回来?要等多久?这几节讲常返性,再往下是击中概率和格林函数。
哪些状态能走到一起,第一次到达某个状态要多久,以及到了这个时刻以后,能不能把过程重新开始算。
应随第一章的开头:马氏链是什么,转移矩阵怎么写,不变分布怎么求。后面还有可逆分布和几个例子。