Aller au contenu
Données massives et ingénierie des données · L3

Leçon 5 sur 5

Chaînes de traitement des données et mise en production des modèles

Je sais concevoir une chaîne de traitement des données (ingestion, contrôle, transformation, orchestration) et organiser la mise en production d'un modèle d'apprentissage automatique, avec son suivi et son réentraînement.

  • 1 h 30
  • 6 exercices corrigés
  • QCM de 7 questions

À la fin de la leçon, vous saurez :

  • Décrire les étapes d'une chaîne de traitement et opposer ETL et ELT
  • Distinguer traitement par lots et traitement de flux et dimensionner un sujet Kafka
  • Écrire des contrôles de qualité et un graphe de tâches orchestré
  • Choisir un mode de déploiement d'un modèle (par lots, API, embarqué)
  • Surveiller un modèle en production et calculer un indice de dérive (PSI)

Avant de commencer : Leçons 1 à 4 du cours ; Apprentissage automatique.

1Je découvre

Les data scientists de NafaPay, notre opérateur fictif de paiement mobile, ont entraîné sur leurs ordinateurs un modèle de détection de fraude très prometteur. Mais en production, rien ne va. Le fichier d'entraînement avait été extrait « à la main » il y a six mois ; personne ne sait le refaire à l'identique. Le modèle ne tourne qu'une fois par semaine, alors que la fraude se commet en quelques minutes. Et depuis l'ouverture de nouveaux points de retrait près des sites miniers de Siguiri, ses alertes semblent moins pertinentes, sans que personne ne puisse le mesurer.

La directrice technique résume : « Un modèle qui reste dans un carnet Jupyter ne protège aucun client. Il nous faut une chaîne automatique, fiable et surveillée, de la donnée brute jusqu'à la décision. »

Comment construire une chaîne qui transforme des données massives en décisions fiables, et comment mettre un modèle en production sans perdre le contrôle de sa qualité ?

La suite se lit avec votre compte Kharandi Université

La première leçon de chaque cours est libre. Kharandi Université est une inscription à part de l’école : avec votre compte étudiant, vous lisez toutes les leçons en entier, avec les exercices corrigés et les QCM, et les 7 premiers jours sont offerts.

Voir toutes les leçons de Données massives et ingénierie des données

Signaler une erreur dans cette leçon

Toutes les leçons de Données massives et ingénierie des données

Pose ta question à Karamö