Deep Learning for Computer Vision II: Advanced Topics

Content

Tiefe faltende neuronale Netze (engl. Convolutional Neural Networks, CNNs) erzielen exzellente Ergebnisse in vielen Bereichen der Computer Vision, haben jedoch bei realen Anwendungen mit Herausforderungen zu kämpfen, wie die Abhängigkeit von kostspielig annotierten Trainingsdaten, hohe Rechenleistung oder schwere Nachvollziehbarkeit der Entscheidungswege. Während die Entwicklung der Erkennungsalgorithmen für lange Zeit primär von hohen Erkennungsraten auf großen und sauber annotierten Datensätzen getrieben waren, gewinnen heute anwendungsrelevante Ziele, wie Lernen mit wenig Trainingsdaten, Erklärbarkeit, Unsicherheitsschätzung oder Domänenadaption zunehmend an Bedeutung. 

 

Die Vorlesung behandelt fortgeschrittene Netzarchitekturen, Lernverfahren und Forschungsgebiete im Bereich Deep Learning für Computer Vision. Es werden unter anderem folgende Themen behandelt: 

 

  • Überblick Deep Learning, Faltende Neuronale Netze (CNN), Probleme moderner Architekturen
  • Interpretierbarkeit und Erklärbarkeit der CNNs
  • Unsicherheit in Deep Learning
  • Lernen mit wenig Trainingsdaten
  • Effiziente Architekturen
  • Fortgeschrittene Architekturen (Transformer, Graph Neural Networks)
  • Synergien von Computer Vision und Sprachmodellen
  • Generative Adversarial Networks (GANs)
  • Kontinuierliches Lernen
Language of instructionGerman/English

Vorlesungsfolien

 1   21.10.2024   Introduction / Overview [pdf]

 2   28.10.2024   Weakly Supervised Learning [pdf]

 3   04.11.2024   Semi-Supervised Learning [pdf]

 4   11.11.2024   Basics for Visual Transformers [pdf]

 5   18.11.2024   Tasks for Visual Transformers [pdf]

 6   25.11.2024   Representation Learning [pdf]

 7   02.12.2024   Vision and Language [pdf]

 8   09.12.2024   Efficient Networks and Parameter-Efficient Fine-Tuning [pdf]

 9   16.12.2024   Generative Models [pdf]

10   No Lecture

Holiday Season

11   13.01.2025   Uncertainty and Interpretabiltity [pdf]

12   20.01.2025   Continual Learning [pdf]

13   27.01.2025   Visual in-Context Learning [pdf]

14   03.02.2025   Interactive Segmentation, SAM [pdf]

15   10.02.2025   Summary [pdf]