Definition: Mehrstufiger stochastischer Vorgang

Wir wollen im Folgenden einen mehrstufigen stochastischen Vorgang mit insgesamt Teilvorgängen betrachten.

Sei ein abzählbarer Grundraum.
Seien die Übergangswahrscheinlichkeiten.