Definition - Nutzen einer Episode

• Konstrukte:
  • Nutzen einer Strategie
• Eigenschaften:
• Involvierte Definitionen:
  • MDP
  • Episode
  • Belohnungsfunktion
• Veranstaltung: EML
• Referenz: @thimm2024 (Abschnitt 4.1.1)

⠀

Definition: Nutzen einer Episode

Sei ein MDP.
Sei eine Episode.

Als (diskontierten) Nutzen von in bezeichnen wir:

wobei wir als Diskontierungsfaktor (auch Discountfaktor) bezeichnen.

Anmerkung

Auswirkung von

Der Diskontierungsfaktor wägt den Nutzen früher Belohnungen gegen den Nutzen später Belohnungen ab.

Bei kleinem werden Strategien bevorzugt, die möglichst schnell hohe Belohnungen erhalten.

Übliche Werte für sind oder .

Ist , so ist gewährleistet, dass .