Definition: Strategie-induzierte Beobachtung

Sei ein (zunächst unbekannter) Markov-Entscheidungsprozess.
Sei eine feste Strategie.

Als -induzierte Beobachtung bezeichnen wir das Quadrupel:

wobei , , , sodass

  • der Zustand vor Ausführung von sei,
  • der Zustand nach Ausführung von sei
  • und sei.