Deep Learning for Computer Vision II: Advanced Topics

Content

Tiefe faltende neuronale Netze (engl. Convolutional Neural Networks, CNNs) erzielen exzellente Ergebnisse in vielen Bereichen der Computer Vision, haben jedoch bei realen Anwendungen mit Herausforderungen zu kämpfen, wie die Abhängigkeit von kostspielig annotierten Trainingsdaten, hohe Rechenleistung oder schwere Nachvollziehbarkeit der Entscheidungswege. Während die Entwicklung der Erkennungsalgorithmen für lange Zeit primär von hohen Erkennungsraten auf großen und sauber annotierten Datensätzen getrieben waren, gewinnen heute anwendungsrelevante Ziele, wie Lernen mit wenig Trainingsdaten, Erklärbarkeit, Unsicherheitsschätzung oder Domänenadaption zunehmend an Bedeutung. 

 

Die Vorlesung behandelt fortgeschrittene Netzarchitekturen, Lernverfahren und Forschungsgebiete im Bereich Deep Learning für Computer Vision. Es werden unter anderem folgende Themen behandelt: 

 

  • Überblick Deep Learning, Faltende Neuronale Netze (CNN), Probleme moderner Architekturen
  • Interpretierbarkeit und Erklärbarkeit der CNNs
  • Unsicherheit in Deep Learning
  • Lernen mit wenig Trainingsdaten
  • Effiziente Architekturen
  • Fortgeschrittene Architekturen (Transformer, Graph Neural Networks)
  • Synergien von Computer Vision und Sprachmodellen
  • Generative Adversarial Networks (GANs)
  • Kontinuierliches Lernen
Language of instructionGerman/English

Vorlesungsfolien

23.10.2023   1    Introduction / Overview​ [pdf]
30.10.2023   2    Uncertainty​ and Interpretability [pdf]
06.11.2023   3    Representation Learning [pdf]
13.11.2023   4    Basics for Visual Transformers [pdf]
20.11.2023   5    Tasks for Visual Transformers [pdf]
27.11.2023   6    Weakly Supervised Learning [pdf]
04.12.2023   7    Vision and Language, PEFT [pdf]
11.12.2023   8    Generative Models [pdf]
18.12.2023   9    Transfer Learning, Domain Adaptation​ & Efficient Networks [pdf]
                           Holiday season
08.01.2024  10   Continual Learning​ [pdf]
15.01.2024  11   Semi-supervised Learning [pdf]
22.01.2024  12   Few- and Zero-Shot Learning [pdf]
29.01.2024  13   Interactive Segmentation, SAM [pdf]
05.02.2024  14   Summary [pdf]