Présentation
Le Cours CSC8607 – Introduction au deep learning est un cours de troisième année de la VAP MAIA à Télécom SudParis.
-
SujetContenuNotions clefs
-
CI1Introduction
- Panorama de l'IA
- Perceptron
- Fonction d'activation
- Fonction de coût
- Backpropagation
- Descente de gradient
-
CI2Régularisation et optimization
- Cours (Notebook et Images associées et Slides HTML )
- Exercices
- Régularisation
- Overfit/Underfit
- Métriques de classification
- Optimisation
-
CI3Réseaux convolutifs
- convolution
- Kernel/filtre
- Padding
- Stride
- Non-linéarité
- Pooling
-
CI4Réseaux récurrents
- Vashing/exploding gradient
- Initialisation de poids
- Réseau résiduel
- Batch/layer normalisation
- RNN
- LSTM/GRU
-
CI5Réseaux d'attention
- Fonctions d'activation
- Learning rate scheduling
- Hyperparamètres
- Modèles ensemblistes
- Transfer learning
- Attention
- Self-attention
CM : Cours Magistral (lecture only) CI : Cours Intégré (lecture and lab)