Topic outline
General
- Le cours aborde les méthodes avancées d'apprentissage statistique et les problèmes d'optimisation qui se posent dans le domaine de l'apprentissage statistique, ainsi que des algorithmes efficaces pour les résoudre. Plus exactement, nous considérerons le processus d'entraînement automatique comme un problème d'optimisation. En particulier nous aborderons les questions liées à l'apprentissage d'optimisation convexes, différentiables, non convexes et non différentiables.Nous aborderons notamment :
- les questions récentes liées aux progrès récents de l’apprentissage statistique
- les moindres carrés et les pénalités usuelles associées (LASSO, MCP...)
- les méthodes de sélection de variables (Lasso, best subset, PCR et PLS...)
- les problème de réglage d'hyper paramètres
- AutoML
- l' Apprentissage de représentation
- les méthodes de clustering
- les méthodes de Factorisation
Scikit learn sera utilisé pour la mise en ouvre de ces méthodes.Les TD auront lieu sous python à 'aide du notebook jupyterVous pourrez aussi utiliser google colabLe cours et les TD auront lieu sur Zoom
https://zoom.us/j/9888668613
ID de réunion : 988 866 8613N'hésitez pas à installer et à tester zoom !
N'hésitez pas à poser vos questions en avance sur le forum. Evaluation :
1. Pour tous : un examen écrit de 3h
2. Pour les ITI, il faut aussi effectuer une contribution (easy) à scikit learn :
https://github.com/scikit-learn/scikit-learn/issues?q=is%3Aissue+is%3Aopen+label%3AEasy
2.1 Définissez le point sur lequel vous voulez travailler (pour le 6 novembre)
2.2 Rendez votre travail (avant le dimanche 12 janvier)
Cours 2021 - 2022 (pas en visio)
----------------------------------------------------------------------------------------------------------------------------------------
Lecture 1 and 2: Linear Methods for Regression (ESLT, chapter 3)---------------------------------------------------------------------
Cour 3 sur le Lasso et l'optimisaton
------------------------------------------------------------------------
TP 5 : Scikit Learn
-------------------------------------------------------------------------------------------------------------------
TP 6: Auto ML
- ---------------------------------------------------------------------------------------------Cours 7 : Visualisation et réduction de dimension
--------------------------------------------------------------------------------
Cours 8 : Clustering (classification non supervisé)
----------------------------------------------------------------------------------------------------
Cours 9 : les exemples adversaires
---------------------------------------------------------------------------------------------------
Cours 10 : systèmes de recommandation
------------------------------------------------------------------------
TP sur Netflix
Examen final 2021/2022
Examen final 2021/2022