101.789 AKNUM Reinforcement Learning
Diese Lehrveranstaltung ist in allen zugeordneten Curricula Teil der STEOP.
Diese Lehrveranstaltung ist in mindestens einem zugeordneten Curriculum Teil der STEOP.

2024S, VU, 4.0h, 6.0EC

Merkmale

  • Semesterwochenstunden: 4.0
  • ECTS: 6.0
  • Typ: VU Vorlesung mit Übung
  • Format der Abhaltung: Hybrid

Lernergebnisse

Nach positiver Absolvierung der Lehrveranstaltung sind Studierende in der Lage, sowohl die Theorie und die Methoden des Reinforcement Learning inklusive der neuesten Entwicklungen zu verstehen, zu erklären und anzuwenden als auch die wichtigsten Algorithmen zu implementieren.

Inhalt der Lehrveranstaltung

Heuer (2022) mit neuem Skriptum!

Reinforcement Learning ist ein Teilgebiet der künstlichen Intelligenz und beschäftigt sich mit der Entwicklung von Strategien, mit deren Hilfe ein Agent seinen Erfolg in einer stochastischen Umgebung (model free) maximieren kann. Zu den Anwendungen zählen Robotik (OpenAI gym), computer vision, Spiele (wie z.B. Go, Schach, Atari 2600 oder Dota 2) auf menschlichem Niveau oder besser und vieles mehr.  RL ist auch maßgeblich am Erfolg von ChatGPT beteiligt.

Theorie und Algorithmen des Reinforcement Learning:

  • Introduction
  • Bandit problems
  • Markov decision problems
  • Bellman equations
  • Hamilton-Jacobi-Bellman equation
  • Dynamic programming
  • Monte-Carlo learning
  • Temporal-difference learning
  • Tabular methods
  • Function approximation and deep learning
  • On-policy vs. off-policy
  • Eligibility traces
  • Policy gradients and actor-critic
  • RL with human feedback: InstructGPT and ChatGPT
  • Applications

Im Übungsteil wird die Theorie vertieft und die Algorithmen werden implementiert.

Methoden

Vortrag, Skriptum, Übungsbeispiele.

Prüfungsmodus

Schriftlich

Weitere Informationen

Die Lehrveranstaltung wird in Präsenz gehalten, live gestreamt und aufgezeichnet.

Termin der Vorbesprechung wird noch bekanntgegeben.

Vortragende Personen

Institut

Leistungsnachweis

Kontinuierlich in den Übungen; schriftliche Tests.

LVA-Anmeldung

Von Bis Abmeldung bis
04.03.2024 00:00 10.04.2024 00:00 10.04.2024 00:00

Curricula

StudienkennzahlVerbindlichkeitSemesterAnm.Bed.Info
066 645 Data Science Gebundenes Wahlfach
860 GW Gebundene Wahlfächer - Technische Mathematik Keine Angabe

Literatur

Ein Skriptum (englisch) wird kostenlos an die Teilnehmer ausgegeben.

Vorkenntnisse

Die Theorie wird in der Vorlesung in sich abgeschlossen erklärt, sodass die LVA ab dem vierten Semester absolviert werden kann. Programmierkenntnisse werden vorausgesetzt (z.B. Python oder Julia).

Weitere Informationen

Sprache

bei Bedarf in Englisch