Start a conversation ↗

Description

ETL : collecter, transformer et orchestrer ses flux de données métier

Construire des chaînes de traitement de données fiables, reproductibles et supervisées au quotidien

  • 1 jour — 7 h
  • Présentiel ou à distance
  • Perfectionnement
  • Jusqu’à 6 participants

Les flux de données se construisent souvent par accumulation : un script d'extraction ici, une macro de retraitement là, un fichier déposé manuellement chaque lundi. Tant que rien ne casse, la chaîne tient. Le jour où une source change de format ou une exécution échoue à trois heures du matin, personne ne sait quelles données sont à rejouer.

Cette journée traite la conception d'une chaîne ETL complète : cadrage des sources, transformations documentées, contrôles de qualité, puis orchestration avec gestion des échecs et des reprises. Les participants construisent un flux de bout en bout sur un jeu de données réaliste.

Objectifs pédagogiques

  • Cadrer un besoin de flux en identifiant sources, fréquence et volumétrie
  • Concevoir l'extraction des données selon le type de source et le mode incrémental
  • Structurer les transformations en étapes documentées et rejouables
  • Implanter des contrôles de qualité et des règles de rejet des données invalides
  • Orchestrer l'enchaînement des tâches avec gestion des dépendances et des échecs
  • Superviser les exécutions et organiser la reprise après incident

Les points forts

Un flux complet construit en séance, de la source jusqu'à la table de restitution
Injection volontaire de pannes pour éprouver la reprise et l'idempotence des traitements
Convention de nommage et de documentation des traitements remise aux participants

Programme

1Cadrage et extraction

Comprendre les sources avant d'écrire le premier traitement

  • Recensement des sources : bases, fichiers, interfaces applicatives
  • Choix entre extraction complète et extraction incrémentale
  • Gestion des formats, des encodages de caractères et des fuseaux horaires
  • Volumétrie, fenêtre de traitement et contraintes des systèmes sources
  • Détection des changements de structure côté source

2Transformation et qualité

Rendre les données utilisables et vérifiables

  • Découpage des transformations en étapes lisibles et testables
  • Normalisation des référentiels et gestion des clés
  • Traitement des doublons, des valeurs manquantes et des historiques
  • Règles de qualité, seuils de rejet et zone de quarantaine
  • Documentation des règles métier appliquées

3Orchestration et exploitation

Faire tourner la chaîne sans surveillance permanente

  • Enchaînement des tâches et gestion des dépendances
  • Planification des exécutions et gestion des fenêtres de traitement
  • Reprise sur incident, idempotence et rejeu partiel
  • Journalisation, alertes et indicateurs de suivi
  • Passage en production et gestion des versions

Public concerné

Développeurs, analystes data, chargés de reporting, administrateurs de bases de données et chefs de projet décisionnel.

Prérequis

Pratiquer le langage SQL et savoir écrire un script d'automatisation simple.

Dates et lieux

36 dates programmées entre novembre 2026 et décembre 2027. Les places sont confirmées par ordre d’arrivée des demandes.

novembre 2026

décembre 2026

janvier 2027

février 2027

mars 2027

avril 2027

mai 2027

juin 2027

septembre 2027

octobre 2027

novembre 2027

décembre 2027

Aucune de ces dates ne vous convient ? Nous ouvrons des sessions supplémentaires sur demande, et chaque programme peut être organisé pour votre seule équipe.

Informations pratiques

Avant la formation
Questionnaire de positionnement en ligne. Vos objectifs de progrès sont transmis au formateur, qui adapte les cas pratiques à votre contexte.
Méthodes pédagogiques
Apports théoriques, ateliers et cas pratiques. Support de cours numérique et fiches méthodes fournis.
Évaluation
QCM et mises en situation. Évaluation des acquis en début et en fin de parcours, évaluation à chaud et à froid à 60 jours.
Après la formation
1 an d'accès à l'espace e-learning. Auto-évaluation des compétences acquises et point de suivi à 30 jours avec votre formateur.
Modalités d’inscription
Inscription en ligne ou sur devis.
Délai d’accès
11 jours ouvrés après confirmation de l'inscription.
Accessibilité
Nos formations sont accessibles aux personnes en situation de handicap. Contactez notre équipe accessibilité pour définir ensemble une solution adaptée : contact@mpf-academy.ae
Dates de démarrage
Entrées permanentes : en plus des sessions programmées, cette formation peut démarrer sur demande.