ATLAS Ouvrir dans l'atlas →

ExerciceMaths expertes, chapitre 9 — Chaînes de Markov · Distribution invariante

Exercice 14 Vitesse de convergence

DémonstrationCalcul

On considère une chaîne de Markov à deux états AA et BB, de matrice de transition P=(0,90,10,30,7)P=\begin{pmatrix} 0{,}9 & 0{,}1 \\ 0{,}3 & 0{,}7 \end{pmatrix}, et l'on note πn=(xn1−xn)\pi_{n}=\begin{pmatrix} x_{n} & 1-x_{n} \end{pmatrix} ses distributions. Initialement, la chaîne est dans l'état BB.

1. Représenter le graphe de la chaîne, puis déterminer sa distribution invariante π\pi.

2. Montrer que, pour tout n∈ℕn\in\mathbb{N}, xn+1=0,6 xn+0,3x_{n+1}=0{,}6\,x_{n}+0{,}3.

3. On pose un=xn−34u_{n}=x_{n}-\dfrac{3}{4}. Montrer que (un)(u_{n}) est géométrique, puis exprimer xnx_{n} en fonction de nn.

4. Déterminer la limite de (πn)(\pi_{n}), puis le plus petit entier nn à partir duquel ∣xn−34∣<0,01\left|x_{n}-\dfrac{3}{4}\right|<0{,}01.

Corrigé

1.

Figure

On cherche π=(x1−x)\pi=\begin{pmatrix} x & 1-x \end{pmatrix} avec πP=π\pi P=\pi : 0,9x+0,3(1−x)=x0{,}9x+0{,}3(1-x)=x, soit 0,4x=0,30{,}4x=0{,}3 et x=34x=\frac{3}{4}. π=(3414)\boxed{\pi=\begin{pmatrix} \frac{3}{4} & \frac{1}{4} \end{pmatrix}}. C'est la formule (qp+q,pp+q)\left(\frac{q}{p+q},\frac{p}{p+q}\right) du cours, avec p=0,1p=0{,}1 et q=0,3q=0{,}3.

2. πn+1=πnP\pi_{n+1}=\pi_{n}P donne, pour la première coordonnée : xn+1=0,9xn+0,3(1−xn)=0,6 xn+0,3x_{n+1}=0{,}9x_{n}+0{,}3(1-x_{n})=\boxed{0{,}6\,x_{n}+0{,}3}.

3. un+1=0,6xn+0,3−0,75=0,6xn−0,45=0,6(xn−0,75)=0,6 unu_{n+1}=0{,}6x_{n}+0{,}3-0{,}75=0{,}6x_{n}-0{,}45=0{,}6\left(x_{n}-0{,}75\right)=0{,}6\,u_{n} : (un)(u_{n}) est géométrique de raison 0,60{,}6. Comme la chaîne part de BB, x0=0x_{0}=0 et u0=−34u_{0}=-\frac{3}{4}, donc : xn=34−34×0,6n\boxed{x_{n}=\frac{3}{4}-\frac{3}{4}\times 0{,}6^{n}}

4. Comme 0<0,6<10<0{,}6<1, 0,6n→00{,}6^{n}\to 0, donc xn→34x_{n}\to\frac{3}{4} et πn→(3414)=π\boxed{\pi_{n}\to\begin{pmatrix} \frac{3}{4} & \frac{1}{4} \end{pmatrix}=\pi}, conformément à la Proposition 4.

On cherche 34×0,6n<0,01\frac{3}{4}\times 0{,}6^{n}<0{,}01. La suite (0,6n)(0{,}6^{n}) est décroissante, et 34×0,68≈0,0126\frac{3}{4}\times 0{,}6^{8}\approx 0{,}0126, tandis que 34×0,69≈0,0076\frac{3}{4}\times 0{,}6^{9}\approx 0{,}0076. n=9\boxed{n=9}. Au bout de neuf étapes, la distribution est donc à moins d'un centième de la distribution invariante.

Ouvrir dans l'atlas interactif →