ExerciceMaths expertes, chapitre 9 — Chaînes de Markov · Distribution invariante
Exercice 15
Une chaîne de Markov a pour matrice de transition .
1. Justifier que cette chaîne admet une unique distribution invariante .
2. Montrer que , et sont solutions d'un système de trois équations, et le résoudre.
3. À l'aide de la calculatrice, calculer . Que constate-t-on ? Interpréter.
Corrigé
1. Aucun coefficient de hors de la diagonale n'est nul : d'après la Proposition 3, la chaîne admet une unique distribution invariante.
2. s'écrit, colonne par colonne, et en ajoutant la condition : La deuxième équation donne , et avec : , soit . La troisième donne , soit , et avec : . Enfin . La première équation est alors vérifiée : . L'erreur la plus répandue est d'oublier la condition : le système seul a une infinité de solutions, toutes proportionnelles.
3. La calculatrice donne : les trois lignes sont presque égales à . Quel que soit l'état de départ, la loi de est très proche de : la chaîne a « oublié » son point de départ. C'est ce qu'exprime pour toute distribution initiale .