Definition: Startverteilung einer Markovkette

Sei eine abzählbare Menge (hier auch Zustandsraum).
Sei ein Wahrscheinlichkeitsraum.
Sei eine Markovkette.

Als Startverteilung von bezeichnen wir die Verteilung von .