:马尔可夫链 随机过程练习题
1.设质點在区间[0,4]的整数点作随机游动,到达0点或4点后以概率1停留在原处,
在其它整数点分别以概率
1向左、右移动一格或停留在原处求质点随机游动嘚一
步和二步转移的概率矩阵。 2.独立地重复抛掷一枚硬币,每次抛掷出现正面的概率为p ,对于2≥n 求,令n X =0,
1,2或3,这些值分别对应于第1-n 次和第n 次抛掷的结果为(正,正),(正,反),
(反,正)或(反,反)求马尔可夫链},2,1,0,{ =n X n 的一步和二步转移的概率矩阵。
4.设}1,{≥n X n 为有限齐次马尔可夫链,其初始分布和马尔可夫一步转移概率矩阵阵为==0{X P p i
6.已知随机游动的马尔可夫一步转移概率矩阵阵为????
7.已知本月销售状态的初始分布和马尔可夫一步转移概率矩阵阵如下: