ExerciceMaths expertes, chapitre 9 — Chaînes de Markov · Distribution invariante
Exercice 14 Vitesse de convergence
On considère une chaîne de Markov à deux états et , de matrice de transition , et l'on note ses distributions. Initialement, la chaîne est dans l'état .
1. Représenter le graphe de la chaîne, puis déterminer sa distribution invariante .
2. Montrer que, pour tout , .
3. On pose . Montrer que est géométrique, puis exprimer en fonction de .
4. Déterminer la limite de , puis le plus petit entier à partir duquel .
Corrigé
1.
On cherche avec : , soit et . . C'est la formule du cours, avec et .
2. donne, pour la première coordonnée : .
3. : est géométrique de raison . Comme la chaîne part de , et , donc :
4. Comme , , donc et , conformément à la Proposition 4.
On cherche . La suite est décroissante, et , tandis que . . Au bout de neuf étapes, la distribution est donc à moins d'un centième de la distribution invariante.