Definition: Rückkehr zum Startpunkt einer Markovkette

Sei ein abzählbarer Zustandsraum.
Sei ein Wahrscheinlichkeitsraum.
Sei eine Markovkette.
Sei der Startpunkt von .

Als den -ten Zeitpunkt, zu dem zu dem Startpunkt zurückkehrt, definieren wir rekursiv:

Wobei wir für definieren, dass: