状态区间1

状态区间2

状态区间3

状态区间4

一步转移概率

0

1 6

0

5 6

二步转移概率

1 5

1 5

0

3 5

三步转移概率

2 5

1 5

0

2 5

合计

0.6

0.567

0

1.834