概率论中吸收马氏链问题有5个房间,第一个房间花费2元进去,有90%概率获得进入第二个房间的机会.进入第二个房间需花费3元,有70%概率获得进入第三个房间机会,30%概率回到第一个房间.第三房

Question

概率论中吸收马氏链问题
有5个房间,第一个房间花费2元进去,有90%概率获得进入第二个房间的机会.进入第二个房间需花费3元,有70%概率获得进入第三个房间机会,30%概率回到第一个房间.第三房间花费4元,有50%概率进入第四房间,50%几率回到第二房间.第四房间花费5元,有30%概率进入第五房间,70%概率回到第三房间.宝藏在第五房间.即第五房间为吸收状态.现在我想问转移矩阵P是什么,Q是什么,M=（I-Q）^（-1）中I是单位矩阵吗?

Answer 1

P=[0.1 0.9 0 0 0
0.3 0 0.7 0 0
0 0.5 0 0.5 0
0 0 0.7 0 0.3
0 0 0 0 1]
不知道你要求什么,M和Q是什么