ExerciceMaths expertes, chapitre 9 — Chaînes de Markov · Problèmes de synthèse
Exercice 18 La puce du cours
On reprend l'exemple du cours : une puce saute d'un sommet à l'autre d'un triangle, sans jamais rester sur place, de façon équiprobable. On note la matrice de transition, la matrice identité d'ordre et la matrice carrée d'ordre dont tous les coefficients valent .
1. Vérifier que et que .
2. Montrer par récurrence que, pour tout :
3. En déduire la probabilité que la puce soit revenue à son sommet de départ après sauts. Retrouver la valeur du cours pour .
4. Déterminer la limite de , puis la distribution invariante de la chaîne. Interpréter.
Corrigé
1. a des sur la diagonale et des ailleurs : la moitié donne bien . Chaque coefficient de est la somme de trois produits , d'où .
2. On note l'égalité annoncée.
Initialisation : Pour : .
Hérédité : Supposons vraie. On calcule d'abord, à l'aide de :
Ainsi , ce qui est .
Conclusion : L'égalité est vraie pour tout .
3. est un coefficient diagonal de (Chapman-Kolmogorov) : Pour : , c'est le coefficient calculé dans le cours. On vérifie aussi (la puce ne reste jamais sur place) et .
4. Comme , , d'où . Plus généralement , dont toutes les lignes valent . Cette distribution est invariante, puisque , chaque colonne de ayant pour somme . Elle est unique d'après la Proposition 3. À long terme, la puce a autant de chances d'être sur chacun des trois sommets, ce que la symétrie du triangle laissait prévoir. La probabilité de retour oscille autour de en s'en rapprochant, à cause du signe alterné de . Ce calcul est celui du graphe complet (exercice 29 du chapitre 6), divisé par .