Korollar: Verteilung einer homogenen Markovkette ist durch Startverteilung und Übergangsmatrix eindeutig bestimmt

Sei eine abzählbare Menge (hier auch Zustandsraum).
Sei ein Wahrscheinlichkeitsraum.
Sei eine zeithomogene Markovkette.
Sei die Übergangsmatrix.
Sei die Verteilung von .

Dann gilt:

Die Verteilung von ist vollständig durch die Startverteilung und bestimmt.