清华大学出版社 陆大金编著
2相通组成一个闭集
，且，故状态0、2是常返态；因
为
，所以状态1为非常返态。
（4）0、1相通作成一闭集，且
，故0、1为常返态；又
故2为常返态；
，故3、4为非常返态。
第六讲作业：
P115/17．解：（1）一步转移矩阵为：
（2）当
时，由计算可得
，因此可由以下方程组计算极限分布：
解得极限分布即可。
P115/18．解：由第七题的结果，计算可得：，
因此可计算极限分布如下：
解以上方程，得极限分布：
P115/19．解：见课上讲稿。
P116/21．解：记
，则有：
，故
，因此
，