194.163 AKNUM Reinforcement Learning
Diese Lehrveranstaltung ist in allen zugeordneten Curricula Teil der STEOP.
Diese Lehrveranstaltung ist in mindestens einem zugeordneten Curriculum Teil der STEOP.

2024S, VU, 4.0h, 6.0EC
TUWEL

Merkmale

  • Semesterwochenstunden: 4.0
  • ECTS: 6.0
  • Typ: VU Vorlesung mit Übung
  • Format der Abhaltung: Präsenz

Lernergebnisse

Nach positiver Absolvierung der Lehrveranstaltung sind Studierende in der Lage, sowohl die Theorie und die Methoden des Reinforcement Learning inklusive der neuesten Entwicklungen zu verstehen, zu erklären und anzuwenden als auch die wichtigsten Algorithmen zu implementieren.

Inhalt der Lehrveranstaltung

[Heuer (Sommersemester 2024) mit erweitertem Skriptum!]

Reinforcement Learning ist ein Teilgebiet der künstlichen Intelligenz bzw. des maschinellen Lernens und beschäftigt sich mit der Entwicklung von Strategien, mit deren Hilfe ein Agent seinen Erfolg in einer stochastischen Umgebung (model free) maximieren kann. Zu den Anwendungen zählen Robotik (OpenAI gym bzw. Gymnasium), computer vision, Spiele (wie z.B. Go, Schach, Atari 2600 oder Dota 2) auf menschlichem Niveau oder besser und vieles mehr.  Nicht zuletzt ist RL der letzte und wichtigste Trainingsschritt in Large Language Models (LLM) wie ChatGPT und Gemini.

Theorie und Algorithmen des Reinforcement Learning:

  • Introduction
  • Bandit problems
  • Markov decision problems
  • Bellman equations
  • Hamilton-Jacobi-Bellman equation
  • Dynamic programming
  • Monte-Carlo learning
  • Temporal-difference learning
  • Tabular methods
  • Function approximation and deep learning
  • On-policy vs. off-policy
  • Eligibility traces
  • Policy gradients and actor-critic
  • RL with human feedback: InstructGPT and ChatGPT
  • Applications

Im Übungsteil wird die Theorie vertieft und die Algorithmen werden implementiert.

Methoden

Vortrag, Skriptum, Übung.

Prüfungsmodus

Schriftlich

Vortragende Personen

Institut

LVA Termine

TagZeitDatumOrtBeschreibung
Do.11:00 - 13:0007.03.2024HS 7 Schütte-Lihotzky - ARCH Vorbesprechung
Di.11:00 - 13:0012.03.2024EI 5 Hochenegg HS Vorlesung und Übung
Do.11:00 - 13:0014.03.2024 - 27.06.2024EI 5 Hochenegg HS Vorlesung und Übung
Di.14:00 - 16:0019.03.2024 - 30.04.2024EI 5 Hochenegg HS Vorlesung und Übung
Di.13:00 - 15:0014.05.2024EI 5 Hochenegg HS Vorlesung und Übung
Di.11:00 - 13:0028.05.2024 - 25.06.2024EI 5 Hochenegg HS Vorlesung und Übung
Do.11:00 - 13:0020.06.2024HS 7 Schütte-Lihotzky - ARCH Vorlesung und Übung
AKNUM Reinforcement Learning - Einzeltermine
TagDatumZeitOrtBeschreibung
Do.07.03.202411:00 - 13:00HS 7 Schütte-Lihotzky - ARCH Vorbesprechung
Di.12.03.202411:00 - 13:00EI 5 Hochenegg HS Vorlesung und Übung
Do.14.03.202411:00 - 13:00EI 5 Hochenegg HS Vorlesung und Übung
Di.19.03.202414:00 - 16:00EI 5 Hochenegg HS Vorlesung und Übung
Do.21.03.202411:00 - 13:00EI 5 Hochenegg HS Vorlesung und Übung
Di.09.04.202414:00 - 16:00EI 5 Hochenegg HS Vorlesung und Übung
Do.11.04.202411:00 - 13:00EI 5 Hochenegg HS Vorlesung und Übung
Di.16.04.202414:00 - 16:00EI 5 Hochenegg HS Vorlesung und Übung
Do.18.04.202411:00 - 13:00EI 5 Hochenegg HS Vorlesung und Übung
Di.23.04.202414:00 - 16:00EI 5 Hochenegg HS Vorlesung und Übung
Do.25.04.202411:00 - 13:00EI 5 Hochenegg HS Vorlesung und Übung
Di.30.04.202414:00 - 16:00EI 5 Hochenegg HS Vorlesung und Übung
Do.02.05.202411:00 - 13:00EI 5 Hochenegg HS Vorlesung und Übung
Di.14.05.202413:00 - 15:00EI 5 Hochenegg HS Vorlesung und Übung
Do.16.05.202411:00 - 13:00EI 5 Hochenegg HS Vorlesung und Übung
Do.23.05.202411:00 - 13:00EI 5 Hochenegg HS Vorlesung und Übung
Di.28.05.202411:00 - 13:00EI 5 Hochenegg HS Vorlesung und Übung
Di.04.06.202411:00 - 13:00EI 5 Hochenegg HS Vorlesung und Übung
Do.06.06.202411:00 - 13:00EI 5 Hochenegg HS Vorlesung und Übung
Di.11.06.202411:00 - 13:00EI 5 Hochenegg HS Vorlesung und Übung

Leistungsnachweis

Übungsteil und zwei Tests.

LVA-Anmeldung

Von Bis Abmeldung bis
01.03.2024 00:00 17.03.2024 23:59 07.04.2024 23:59

Curricula

StudienkennzahlVerbindlichkeitSemesterAnm.Bed.Info
066 645 Data Science Gebundenes Wahlfach

Literatur

Es wird kein Skriptum zur Lehrveranstaltung angeboten.

Vorkenntnisse

The theoretical aspects will be explained in the lectures in a self-contained manner. The usual knowledge of linear algebra, calculus, and probability theory is required.

Weitere Informationen

Sprache

Englisch