Definition - Teilprobelauf eines Zustands

• Konstrukte:
  • Teilprobeläufe eines Zustands aus einer Menge strategie-induzierter Probeläufe
• Involvierte Definitionen:
  • Probelauf bezüglich einer Strategie
  • Zustandsraum
  • MDP
• Veranstaltung: EML
• Referenz: @thimm2024 (Abschnitt 4.2.1, Definition 2)

⠀

Definition: Teilprobelauf eines Zustands

Sei ein (zunächst unbekannter) Markov-Entscheidungsprozess.
Sei eine Strategie.
Sei mit ein Probelauf bezüglich .

Als Teilprobelauf bezüglich bezeichnen wir

Anders gesagt handelt es sich also genau um die Menge der Teilsequenzen von , die mit einer Beobachtung beginnen, deren Zustand dem Zustand entspricht.