1. Comme , on a , d'où .
On lit sur le graphe les probabilités d'arriver en chaque état, à l'aide de la formule des probabilités totales.
(a)
(b)
(c) On vérifie : .
(d) On repart de :
2. On lit les arêtes partant de chaque sommet : Les deux zéros de la dernière colonne traduisent qu'aucune arête n'arrive en depuis ou depuis : une fois quitté, l'état ne peut être atteint que depuis .
On retrouve alors les résultats de la question 1 par le calcul matriciel :