Proposition: Stationäre Verteilung ist nicht eindeutig

Sei eine abzählbare Menge (hier auch Zustandsraum).
Sei ein Wahrscheinlichkeitsraum.
Sei eine zeithomogene Markovkette.
Sei die Übergangsmatrix von .

Dann gilt:

Nicht zu jeder (zeithomogenen?) Markovkette existiert auch eine stationäre Verteilung.

Beweis

Beispielsweise ist die einfache symmetrische Irrfahrt auf ein Beispiel für eine (zeithomogene?) Markovkette, die keine stationäre Verteilung besitzt.