Considere a cadeia de Markov com matriz de transição: O processo é iniciado no estado 1; encontre a probabilidade de que ele esteja no estado 3 ...

Para encontrar a probabilidade de que a cadeia de Markov esteja no estado 3 após duas etapas, precisamos elevar a matriz de transição ao quadrado e multiplicar o vetor de estado inicial [1 0 0] por essa matriz. A matriz de transição ao quadrado é: [0.5 0.25 0.25] [0.25 0.5 0.25] [0.25 0.25 0.5] Multiplicando o vetor de estado inicial por essa matriz, obtemos: [1 0 0] x [0.5 0.25 0.25] [0.25 0.5 0.25] [0.25 0.25 0.5] = [0.5 0.25 0.25] Portanto, a probabilidade de que a cadeia de Markov esteja no estado 3 após duas etapas é de 0.25, o que corresponde à alternativa B.