Ce cours traite de la discrétisation des EDP en 1D notamment par la méthode des différences finies. Des notions d’algèbre linéaire numérique seront également abordées en fin de cours. En fonction du parcours de l’étudiant.e, ce contenu pourra être vu comme des rappels de M1.

Ce cours traite la syntaxe et les outils fondamentaux du langage C++. On aborde notamment l’allocation dynamique, la programmation orientée objet (classes, héritage, polymorphisme dynamique) et la programmation générique (templates, STL, polymorphisme statique). Chaque séance de cours magistral est suivie d’une séance de mise en pratique sur machine. L’évaluation consiste en un DM et une épreuve de programmation en temps limité.

Cours d’introduction aux processus de Markov :

• Chaînes de Markov à temps discret,
• Processus de sauts markoviens,
• Propriétés des processus en temps long, théorèmes ergodiques.

Martingales à temps discret, martingales à temps continu, convergences et théorème d’arrêt. Mouvement brownien, propriété de Markov et propriété de martingale. Intégrale stochastique par rapport au mouvement brownien, formule d’Itô, théorème de Girsanov. Introduction aux équations différentielles stochastiques, équations à coefficients lipschitziens, diffusions et propriété de Markov.

Nous explorerons différents algorithmes d’apprentissage supervisés, par le prisme de la théorie statistique et des implémentations sur machine. La théorie générale de l’apprentissage statistique nous permettra de comprendre le rôle des différents hyperparamètres sur les performances des méthodes. Les algorithmes les plus classiques seront décrits et étudiés (plus proches voisins, méthodes d’ensembles basées sur les arbres). Certaines séances donneront lieu à des implémentations sur machine permettant de comparer les performances des différentes méthodes.

L’ensemble des cours s’appuyera sur des TP en R et/ou Python appliqués à la prévision de consommation électrique. L’évaluation se fera sous forme de projet.

Les thématiques abordées sont :

• Analyse de séries temporelles et modèles ARMA
• Régression, régularisation et approches en ligne
• Modèles additifs généralisés
• Forêts aléatoires, boosting et approches en ligne
• Réseaux de neurones récurrents et variations (LTSM, GRU)
• Agrégation d’expert en ligne
• Interprétabilité des modèles d’apprentissate automatique

Compléments au cours de l’UE MU5MAI02 du bloc de base.

Thèmes abordés:

• Tests statistiques
• Introduction des outils de Contrôle Statistique des procédés (histogramme et arbre d’événement, feuille de contrôle, diagramme de Pareto)
• Cartes de contrôles (les cartes R, S, p, np, c, etc)
• Cartes de contrôle en présence de données corrélées.
• Méthodes d’échantillonnage pour le contrôle de qualité.

Ce cours introduit de façon simple et efficace à la simulation sur GPU (Graphics Processing Units). Il est agencé autour de la simulation Monte Carlo fortement adaptée à la parallélisation. Il permet ainsi de se concentrer sur les optimisations permises par l’architecture du GPU.

Fondements et principes des réseaux neuronaux jusqu’à l’apprentissage automatique. Etude et description des principaux réseaux : modèles historiques, à compétitions, réseaux profonds (Deep learning) : Perceptron Multi-Couches, PMC, (DNN), convolutionnels (CNN) et DBN. Pratique logicielle précisée plus bas. S’appuyant sur les projets individuels, une partie du cours se réalise en pédagogie inversée. De par la remise d’un projet individuel et de sa présentation orale, l’étudiant.e acquiert à la fois la compétence orientée statistique dans l’usage des réseaux neuronaux pour le traitement des grandes masses de données (Big Data) ainsi qu’une autonomie (pédagogie inversée) et un savoir faire dans la présentation d’exposés scientifiques.

Evaluation: Un devoir logiciel, un projet individuel (parties théorique et logicielle), exposé avec démos interactives. La présence est obligatoire à tous les cours.

L’objectif de ce cours est d’étudier la convergence de nombreux algorithmes en ligne, d’abord dans un cadre déterministe puis aléatoire. Il sera démontré que l’apprentissage séquentiel fournit des solutions adaptatives et robustes à de nombreux problèmes d’optimisations convexes sous contraintes. La conver- gence des algorithmes étudiés sera illustrée sous R dans le cadre de la classification des données MNIST.

Thèmes abordés — Introduction à l’optimisation convexe dans un cadre séquentiel — Projection sur le simplexe, parcimonie — Algorithmes du premier et du second ordre — Régularisation et algorithmes libres de projection — Problème du bandit — Apprentissage dans un cadre stochastique

Classification non supervisé; Approches algorithmiques: K-means, classification hiérarchique ; Approche probabiliste basée sur les modèles de mélange; Algorithme EM; Approche bayésienne; Gibbs, Metropolis-Hastings.

• Remise à niveau en anglais
• Préparation au TOEIC

Cours de M. A. pour les non apprentis : Modélisation et conception de schéma de BD (modèle E/A), Traduction de schéma conceptuel en schéma logique (modèle relationnel), Introduction à SQL et requêtes simples, Requêtes SQL avancées (jointures, imbrication, agrégation, regroupement), Création et modification de schéma, Contraintes d’intégrité, Insertion et mises à jour de données, Manipulation avancée de données (programmation Transact-SQL, Triggers, etc.), Transactions et propriétés ACID, Introduction aux bases de données NoSQL, Éléments de programmation en VBA/Excel.

ou

Cours de F. P. pour les apprentis : Programmation en VBA dans Excel. Notion générales de Bases de données, SQL (requêtes courantes) et NoSQL (mongodb). Utilisation du SQL dans le cadre d’un projet Excel et VBA. Enseignement des fondamentaux de la programmation et de la cybersécurité.

L’écologie s’intéresse aux relations que les espèces vivantes entretiennent entre elles et avec leur milieu. L’analyse et la compréhension de ces interactions passe fréquemment par une modélisation statistique visant à décrire les structures et les processus qui sous-tendent ces interactions. L’objectif de ce cours est de présenter certains de ces modèles comme les modèles de distributions (jointes) d’espèces ou les modèles de réseaux écologiques.

Les modèles les plus simples sont des modèles linéaires généralisés, éventuellement mixtes. Les modèles plus complexes sont souvent des modèles à variables latentes qui posent des problèmes d’inférence spécifiques qui seront discutés. De même la distinction entre interactions directes ou indirectes entre les espèces peut être reformulée en termes de modèle graphique, faisant ainsi le lien avec des méthodes plus générales d’inférence de réseaux.

La simulation de variables aléatoires en grande dimension est un véritable défi pour de nombreux problèmes de machine learning récents et pour l’apprentissage de modèles génératifs profonds. Ce problème se rencontre par exemple dans un contexte bayésien lorsque la loi a posteriori n’est connue qu’à une constante de normalisation près, dans le cadre des auto encodeurs variationnels ou encore pour la métamodélisation de systèmes dynamiques complexes.

De nombreuses méthodes sont basées sur des approches de type “Importance Sampling” ou “Sequential Monte Carlo” dont nous rappelerons les éléments principaux. Pour surmonter les faiblesses inhérentes à ces méthodologies en grande dimension ou pour les modèles génératifs profonds (à base de réseaux récurrents, réseaux denses ou convolutifs), nous étudierons dans ce cours de récentes solutions en mettant l’accent sur les aspects méthodologiques. Le fonctionnement de ces méthodes sera illustré à l’aide de jeux de données publics pour des problématiques de “computer vision” et de prédictions de séries temporelles.

Programme:

• Rappels d’analyse de la variance
• Plans factoriels multiples
• Plans latin, gréco-latin
• Applications industrielles

Contexte: assurer la sûreté et la performance des systèmes industriels et limiter leur impact sur l’environnement sont des enjeux majeurs pour tous les industriels, quel que soit le secteur d’activités (agroalimentaire, armement, aéronautique, automobile, chimie, énergie, ferroviaire, métal- lurgie, pharmaceutique…). De tels objectifs passent nécessairement par une évaluation précise de la fiabilité des équipements, c’est-à-dire leur aptitude à ne pas tomber en panne. Les méthodes probabilistes et statistiques sont des outils bien adaptés pour quantifier les risques de défaillance.

En fonction des connaissances disponibles, différentes approches sont envisageables: fréquentistes pour traiter les données de retour d’expérience d’exploitation et de maintenance des matériels, bayésiennes pour tirer profit de dires de spécialistes métier, ou structurelles pour manipuler les résultats de calculs de modèles ou de codes de simulation numérique de phénomènes physiques.

Présentation des architectures parallèles, architecture de la mémoire (partagée, hiérarchique, distribuée, hybride, etc.). Modèles de programmation : OpenMP (mémoire partagé ) MPI (mémoire distribuée).

Algorithmes parallèles distribués dans le contexte de résolution de grands systèmes linéaires pleins ou creux, par méthodes directes ou itératives. Approches de découpage par blocs pour des matrices pleines ou par décomposition de graphe (de la matrice ou du maillage) pour des matrices creuses. TD en Python avec MPI et projets.