EJERCICIO 24 - CADENA DE MARKOV

24. En el diagrama siguiente aparece un laberinto en el que es posible atravesar cada una de las
puertas con igual probabilidad.
Una persona situada inicialmente en el compartimento 1 se
mueve de uno a otro sin interrupción. Escríbase la matriz de
transición de la cadena de Markov correspondiente y
calcúlese la probabilidad de que después de 4 pasos esté en
el compartimento número 3.