ExerciceMaths expertes, chapitre 9 — Chaînes de Markov · Problèmes de synthèse
Exercice 19 La ruine du joueur
Un joueur possède € et joue à pile ou face avec une pièce équilibrée : il gagne € s'il obtient pile, il perd € sinon. Il s'arrête lorsqu'il est ruiné ou lorsqu'il possède €. On note sa fortune après parties, à valeurs dans .
1. Représenter le graphe de cette chaîne de Markov et donner sa matrice de transition . Que dire des états et ?
2. On note la probabilité que le joueur finisse ruiné en partant d'une fortune de euros. On admet que , et, en raisonnant sur la première partie, que et . Calculer et .
3. À l'aide de la calculatrice, calculer et confronter au résultat précédent.
4. Montrer que est une distribution invariante pour tout . Pourquoi ce résultat n'est-il pas en contradiction avec la Proposition 3 du cours ?
Corrigé
1.
Les états et ont une boucle de probabilité : une fois atteints, on ne les quitte plus. Ce sont des états absorbants.
2. Avec et : et . En reportant : , soit . Partant de €, le joueur a deux chances sur trois d'être ruiné avant d'avoir atteint €.
3. La calculatrice donne , à près. La deuxième ligne donne la loi de en partant de : la chaîne est presque sûrement absorbée, en avec probabilité proche de , en avec probabilité proche de . Les deux méthodes concordent.
4. , puisque les lignes et de sont celles de l'identité. Il y a donc une infinité de distributions invariantes. Ce n'est pas contradictoire avec la Proposition 3 : son hypothèse n'est pas vérifiée, car a des coefficients nuls hors de la diagonale. Une proposition qui donne une condition suffisante ne dit rien quand la condition n'est pas remplie.