7

Considere uma cadeia de Markov com a matriz de transição indicada abaixo:

A B C

[ ]
A 1 /3 1/3 1/3
P= B 0 1/2 1/2
C 1 /2 1/4 1/4

Dado que o sistema está em t=1 no estado A, qual a probabilidade de ele estar em cada estado
no instante t = 4?
=> quantos passos de tempo eu tenho que dar?? de t=1 para t=4 => 3 passos
=> temos que calcular P3

[ ][ ][ ][ [ ][
A 1/3 1/3 1/3 1/3 1/3 1/3 1/3 1 /3 1/3
B 0 1/2 1/2
C 1/2 1/4 1 /4
× 0 1/2 1/2
1/2 1/4 1/ 4
= 5/18 13 /36 13/36 ×
¿ ¿ ¿ ]
0 1 /2 1/2 =
1/2 1/4 1/4
59/216 157 /432 157 /432
¿ ¿ ¿ ]
R:

=> 0,273 de probabilidade de estar no estado A

=> 0,363 de probabilidade de estar no estado B

=> 0,363 de probabilidade de estar no estado C

1/9 + 1/6 + 1/12 = (4+6+3)/36=13/36

1/9+ 1/6 + 1/12

5/54 + 13/72 += (20+39)/216

5/54 + 13/72 + 13/144 = (40+78+39)/ 432

5/54 + 13/72+

(a)