一个系统有两个状态,处于A的概率为a,处于B的概率为b.A向B转化的概率为c,B向A转化的概率为d,可知：a+b=1.由稳态的马尔科夫状态方程知：-c*a+d*b=0由高人解释这个方程的由来

Question

一个系统有两个状态,处于A的概率为a,处于B的概率为b .A向B转化的概率为c,B向A转化的概率为d,可知：
a+b=1.由稳态的马尔科夫状态方程知：-c*a+d*b=0 由高人解释这个方程的由来

Answer 1

可以考虑后一个时间tn时系统状态为A的概率pn(A)=a
前一个时间tn-1系统状态为A的概率为pn-1(A)=a,状态为B的概率为Pn-1(B)=b
根据马尔科夫链知识知道：Pn(A)=Pn-1(A)(1-c)+pn-1(B)d
有以上公式得：a=a(1-C)+bd
所以有：：-c*a+d*b=0