Start a conversation ↗

Description

ETL : collecter, transformer et orchestrer ses flux de données métier

Construire des chaînes de traitement de données fiables, reproductibles et supervisées au quotidien

  • 1 day — 7 h
  • In-person or virtual
  • Intermediate
  • Up to 6 participants

Les flux de données se construisent souvent par accumulation : un script d'extraction ici, une macro de retraitement là, un fichier déposé manuellement chaque lundi. Tant que rien ne casse, la chaîne tient. Le jour où une source change de format ou une exécution échoue à trois heures du matin, personne ne sait quelles données sont à rejouer.

Cette journée traite la conception d'une chaîne ETL complète : cadrage des sources, transformations documentées, contrôles de qualité, puis orchestration avec gestion des échecs et des reprises. Les participants construisent un flux de bout en bout sur un jeu de données réaliste.

Learning objectives

  • Cadrer un besoin de flux en identifiant sources, fréquence et volumétrie
  • Concevoir l'extraction des données selon le type de source et le mode incrémental
  • Structurer les transformations en étapes documentées et rejouables
  • Implanter des contrôles de qualité et des règles de rejet des données invalides
  • Orchestrer l'enchaînement des tâches avec gestion des dépendances et des échecs
  • Superviser les exécutions et organiser la reprise après incident

What makes this programme different

Un flux complet construit en séance, de la source jusqu'à la table de restitution
Injection volontaire de pannes pour éprouver la reprise et l'idempotence des traitements
Convention de nommage et de documentation des traitements remise aux participants

Programme

1Cadrage et extraction

Comprendre les sources avant d'écrire le premier traitement

  • Recensement des sources : bases, fichiers, interfaces applicatives
  • Choix entre extraction complète et extraction incrémentale
  • Gestion des formats, des encodages de caractères et des fuseaux horaires
  • Volumétrie, fenêtre de traitement et contraintes des systèmes sources
  • Détection des changements de structure côté source

2Transformation et qualité

Rendre les données utilisables et vérifiables

  • Découpage des transformations en étapes lisibles et testables
  • Normalisation des référentiels et gestion des clés
  • Traitement des doublons, des valeurs manquantes et des historiques
  • Règles de qualité, seuils de rejet et zone de quarantaine
  • Documentation des règles métier appliquées

3Orchestration et exploitation

Faire tourner la chaîne sans surveillance permanente

  • Enchaînement des tâches et gestion des dépendances
  • Planification des exécutions et gestion des fenêtres de traitement
  • Reprise sur incident, idempotence et rejeu partiel
  • Journalisation, alertes et indicateurs de suivi
  • Passage en production et gestion des versions

Who is it for

Développeurs, analystes data, chargés de reporting, administrateurs de bases de données et chefs de projet décisionnel.

Prerequisites

Pratiquer le langage SQL et savoir écrire un script d'automatisation simple.

Dates & locations

36 scheduled dates between novembre 2026 and décembre 2027. Seats are confirmed in the order enquiries are received.

novembre 2026

décembre 2026

janvier 2027

février 2027

mars 2027

avril 2027

mai 2027

juin 2027

septembre 2027

octobre 2027

novembre 2027

décembre 2027

None of these dates suit you? We open additional sessions on request, and any programme can be run privately for your team.

Practical details

Before the programme
Online positioning questionnaire. Your development objectives are shared with the trainer, who tailors the practical case studies to your context.
Teaching methods
Theoretical input, workshops and practical case studies. Digital course materials and method sheets provided.
Assessment
Multiple-choice tests and role-play exercises. Assessment of learning at the start and end of the programme, with immediate and 60-day follow-up evaluations.
After the programme
One year of access to the e-learning platform. Self-assessment of the skills acquired and a 30-day follow-up session with your trainer.
How to register
Registration online or on the basis of a quotation.
Lead time
11 working days after confirmation of registration.
Accessibility
Accessible to people of determination. Contact our accessibility coordinator to design a suitable solution: contact@mpf-academy.ae
Start dates
Rolling intake: in addition to the scheduled sessions, this programme can start on request.