Théorème 5Chaînes de Markov
Marche aléatoire simple sur ℤᵈ
Soit et les vecteurs de la base canonique de , ensemble dénombrable (ℚ est dénombrable). La marche aléatoire simple sur est la chaîne de matrice pour , et pour les autres : à chaque pas, le marcheur va vers l'un de ses voisins, choisi uniformément.
(i) , et, avec les notations du nœud Coefficients multinomiaux, tandis que, pour ,
(ii) Pólya. La marche simple est irréductible ; elle est récurrente pour et , et transiente pour .
Démonstration
(i) Un chemin de longueur issu de est un mot de longueur sur l'alphabet des directions , de probabilité par la formule des chemins (Matrices de transition, (iii)). Il revient en si et seulement si, pour chaque , il comporte autant de pas que de pas ; sa longueur est alors paire.
Pour et , il y a tels mots (Coefficients multinomiaux, (i)), d'où .
Pour , en notant et les nombres de pas et , avec , par le point (iii) du même nœud.
Pour , de même, et .
(ii) Irréductibilité. De , on atteint en un pas, donc tout point de par un chemin. Comme , la formule des chemins donne : tous les états sont de même nature, et il suffit d'étudier par le critère du nœud Récurrence et transience, (ii).
et . Comme , on a (Coefficients multinomiaux, (ii)). La série harmonique diverge, puisque ses termes d'indices ont une somme au moins égale à ; donc .
. Pour , et , d'où . Pour , si bien que les sommes partielles de sont majorées par , par télescopage. La série converge.
□Une trajectoire de la marche dans le plan revient sans cesse à l'origine, mais à des instants de plus en plus espacés.
Pour , la série converge, mais lentement : ses premiers termes donnent , et sa somme vaut , valeur que l'on obtient par une formule close tirée de l'analyse de Fourier, qui est admise ici. Par le point (i) du nœud Récurrence et transience, , et la probabilité de retour vaut : un marcheur de l'espace a environ deux chances sur trois de ne jamais revenir à son point de départ.
Pour , la marche est encore transiente, ce que l'on démontre de même avec des coefficients à termes ; ce cas est admis ici.
Pólya a établi ce théorème en 1921 (Über eine Aufgabe der Wahrscheinlichkeitsrechnung betreffend die Irrfahrt im Straßennetz, Mathematische Annalen 84). La démonstration usuelle passe par la formule de Stirling ; elle est remplacée ici par des comparaisons de quotients successifs, qui suffisent parce que seuls comptent les exposants , et de .