188.989 Visual Perception for Autonomous Navigation/Cars/Robots
Diese Lehrveranstaltung ist in allen zugeordneten Curricula Teil der STEOP.
Diese Lehrveranstaltung ist in mindestens einem zugeordneten Curriculum Teil der STEOP.

2018W, VU, 2.0h, 3.0EC

Merkmale

  • Semesterwochenstunden: 2.0
  • ECTS: 3.0
  • Typ: VU Vorlesung mit Übung

Ziele der Lehrveranstaltung

Der Kurs lehrt den Student/Innen die grundlegenden Konzepte und Techniken aus dem Forschungsgebiet der Kamera-basierten 3D Umfeldmodellierung für mobile Roboter. Im Zuge der Vorlesungen werden die Herausforderungen, welche sich bei der Umfeld Wahrnehmung mit einem Fahrzeug ergeben, analysiert und aktuelle "State of the Art" Lösungen präsentiert. Während die dabei präsentierten Techniken universal einsetzbar sind, fokussiert sich der Kurs jedoch auf autonome Fahrzeuge.

Inhalt der Lehrveranstaltung

In dieser Lehrveranstaltung werden ausgewählte Teilprobleme kamerabasierter Fahrerassistenzsysteme für autonome Fahrzeuge präsentiert. Dazu zählt die Schätzung von Bewegung in Bildern, die Berechnung von 3D Punkten, die Segmentierung statischer und dynamischer Objekte in Bildern sowie die Schätzung der Eigenbewegung der Kamera.
In einem einführenden Vorlesungsteil werden wichtige grundlegende Begriffe der Bildverarbeitung und 3D Computer Vision kurz wiederholt, um auch TeilnehmerInnen mit geringen Vorkenntnissen die nötigen Voraussetzungen zu vermitteln. Außerdem wird in den Bereich der Fahrerassistenzsysteme eingeführt und wesentliche Begriffe sowie relevante Technologien besprochen. Im Hauptteil der Vorlesung werden effiziente Methoden zur 3D-Navigation, Lokalisierung sowie Rekonstruktion im Rahmen von Mono, Stereo und Surround View-Kamerasystemen besprochen und erarbeitet.
Die Vorlesung vermittelt einerseits Techniken zur Schätzung und Tracking von Bewegungen sowie zur Rekonstruktion von 3D-Information aus der Videosequenz, andererseits wird ein Schwerpunkt auf aktuelle Entwicklungen und Anwendungen im Bereich von Fahrerassistenzsystemen gelegt. Die praktische Vermittlung der Lehrinhalte mittels Programmieraufgaben und Demonstrationen ist ein zentrales Anliegen der Lehrveranstaltung. Falls die Zeit es zulässt, werden aktuelle Arbeiten aus dem sehr aktiven Forschungsfeld der autonomen Fahrzeuge diskutiert und bearbeitet.

Dabei werden folgende Themen besprochen:

 

1. Einführung

  • Kamera als Umfeldsensor : Vor- und Nachteile
  • Kamera basierte Umfeldwahrnehmung für autonome Roboter
  • Praxisbeispiele : mobile industrielle Roboter, Autonome Fahrzeuge, Drohnen
  • Konfiguration und Aufbau von Sensoriksysteme für autonome Roboter
 
 

2. Koordinatensysteme und Transformationen

  • Überblick zu Koordinatensystemen und Transformationen
  • Darstellung und Parmetrisierung von Transformationen
  • 3D Punktwolken Registrierung ¿ ICP Algorithmus
 

3. Von 3D zu 2D und zurück zu 3D

  • Kameraprojektion
  • Bildgebung bei Bewegung
  • Korrespondenzproblem in Bildsequenzen: Features und Feature Matching
  • 3D Rekonstruktion   
  • Stereobildverarbeitung
 

4. Sensor Fusion & (V) SLAM

  • Sensor Fusion
  • SLAM
  • Visual Slam    
  • Visual Interial SLAM

Weitere Informationen

Detailinformationen zur LV werden in der Vorbesprechung am 4.10.2018 präsentiert. Bitte beachten Sie, dass keine Vorlesung stattfindet am 20.12. und am 10.1. Zusätzlich werden alle Informationen im TUWEL-Kurs zu dieser LV angeboten.

ECTS-Aufwandsabschätzung: 75h, die sich folgendermaßen ergeben:

  • 15h Vorlesung (5*3h)
  • 45h Programmieraufgaben (3*15h)
  • 13h Abgabevorbereitung
  • 2h   Abgabe

Vortragende Personen

Institut

LVA Termine

TagZeitDatumOrtBeschreibung
Do.11:00 - 12:0004.10.2018Seminarraum FAV 01 C (Seminarraum 188/2) Vorbesprechung
Do.09:00 - 12:0008.11.2018 - 17.01.2019Seminarraum FAV 01 C (Seminarraum 188/2) Visual Perception for Autonomous Navigation/Cars/Robots
Visual Perception for Autonomous Navigation/Cars/Robots - Einzeltermine
TagDatumZeitOrtBeschreibung
Do.04.10.201811:00 - 12:00Seminarraum FAV 01 C (Seminarraum 188/2) Vorbesprechung
Do.08.11.201809:00 - 12:00Seminarraum FAV 01 C (Seminarraum 188/2) Visual Perception for Autonomous Navigation/Cars/Robots
Do.22.11.201809:00 - 12:00Seminarraum FAV 01 C (Seminarraum 188/2) Visual Perception for Autonomous Navigation/Cars/Robots
Do.29.11.201809:00 - 12:00Seminarraum FAV 01 C (Seminarraum 188/2) Visual Perception for Autonomous Navigation/Cars/Robots
Do.06.12.201809:00 - 12:00Seminarraum FAV 01 C (Seminarraum 188/2) Visual Perception for Autonomous Navigation/Cars/Robots
Do.13.12.201809:00 - 12:00Seminarraum FAV 01 C (Seminarraum 188/2) Visual Perception for Autonomous Navigation/Cars/Robots
Do.17.01.201909:00 - 12:00Seminarraum FAV 01 C (Seminarraum 188/2) Visual Perception for Autonomous Navigation/Cars/Robots

Leistungsnachweis

Es wird 3 Programmieraufgaben zu den Vorlesungsinhalten geben, welche in einem persönlichen Abgabegespräch bewertet werden.

LVA-Anmeldung

Von Bis Abmeldung bis
30.08.2018 00:00 14.10.2018 00:00 14.10.2018 00:00

Curricula

StudienkennzahlVerbindlichkeitSemesterAnm.Bed.Info
066 932 Visual Computing Gebundenes Wahlfach

Literatur

Es wird kein Skriptum zur Lehrveranstaltung angeboten.

Vorkenntnisse

Voraussetzungen:

  • Grundlegende Programmierkenntnisse
  • Grundkenntnisse der linearen Algebra und Analysis
  • Grundkenntnisse der Bildverarbeitung

Begleitende Lehrveranstaltungen

Sprache

Englisch