在数轴上原点0及+5处立有两个反射壁,质点在这一范围内随机徘徊,每次一个单位,其徘徊规则为:(1)
在数轴上原点0及+5处立有两个反射壁,质点在这一范围内随机徘徊,每次一个单位,其徘徊规则为:
(1)质点在+1,+2,+3,+4处每次以概率1/3和2/3向左或向右走且仅走一个单位;
(2)质点在0处,下一次以概率2/3向右走到+1.以概率1/3停留在原点:
(3)质点在+5处。下一次分别以概率2/3及1/3停留在+5或走到+4。
ξn表示第n次徘徊后质点的位置是一个马尔可夫链。写出它的状态空间及一步转移矩阵。计算出质点由状态2经两步后可能达到哪些位置以及不能达到哪些位置。