CoursMaths expertes, chapitre 9

Chaînes de Markov

Les graphes pondérés et probabilistes, puis les chaînes de Markov homogènes sur un ensemble fini d'états : matrice de transition, relation de Chapman-Kolmogorov et suite des distributions $\pi_{n+1} = \pi_n P$. Le chapitre se termine par les distributions invariantes, leur existence et la convergence des distributions.

Sommaire

1. Introduction historique p. 1
2. Graphe pondéré p. 2
3. Graphe probabiliste p. 2
4. Chaîne de Markov p. 2
5. Distribution invariante p. 4