ATLAS Ouvrir dans l'atlas →

AnnalesÉcoles d'ingénieurs

Mines-Ponts PC 2023 — Maths 2

Chaîne de Markov en temps continu · 5 pages

PDF hébergé hors du site officiel — source : archive officielle (ZIP)

Pour une matrice stochastique KK, on étudie Ht=e−t∑tnKn/n!H_t = e^{-t}\sum t^n K^n/n!, noyau de Markov vérifiant Ht+s=HtHsH_{t+s} = H_t H_s, que l'on interprète comme une chaîne dont le nombre de sauts suit une loi de Poisson de paramètre tt. Lorsque KK est réversible pour une probabilité π\pi et que 11 est valeur propre simple, le théorème spectral pour le produit scalaire pondéré par π\pi donne ∣Ht[i,j]−π[j]∣⩽e−λtπ[j]/π[i]|H_t[i,j] - \pi[j]| \leqslant e^{-\lambda t}\sqrt{\pi[j]/\pi[i]}, où λ\lambda est la plus petite valeur propre non nulle de I−KI-K, d'où la convergence de Ht[i,j]H_t[i,j] vers π[j]\pi[j].

Le sujet, partie par partie

Notations et préliminaires p. 2–3

Matrices stochastiques et bistochastiques · Exponentielle de matrices · Familles sommables et produit de Cauchy — noyau de Markov, matrice stochastique, produit de Cauchy, série exponentielle de matrices

Partie 1 — Modélisation probabiliste p. 3

Chaînes de Markov · Loi de Poisson · Conditionnement et indépendance — chaîne de Markov, probabilité de transition, nombre de sauts de loi de Poisson

Partie 2 — Étude d'un endomorphisme autoadjoint p. 4

Théorème spectral · Projection orthogonale et moindres carrés · Quotient de Rayleigh et Courant-Fischer — endomorphisme autoadjoint, produit scalaire pondéré, valeur propre simple

Partie 3 — Convergence de HtH_t vers la loi réversible p. 4–5

Chaînes de Markov · Théorème spectral · Espaces préhilbertiens et euclidiens · Équations différentielles linéaires · Exponentielle de matrices — probabilité réversible, loi stationnaire, trou spectral, vitesse de convergence exponentielle

Ouvrir dans l'atlas interactif →