Expert Apache Airflow pour équipes data à Laâyoune

Parcours

Le formateur a utilisé Apache Airflow pour orchestrer et automatiser des traitements de données. Cette pratique s’inscrit dans des travaux de pipelines associant Python, ingestion, préparation de datasets et production d’indicateurs, ainsi que dans un projet de collecte de données déployé dans un environnement cloud.

L’angle de cette formation est l’organisation opérationnelle des traitements data pour les équipes techniques. Les participants apprennent à distinguer les tâches d’un pipeline, leurs dépendances et leur planification. Le formateur aborde Airflow comme un outil de structuration des workflows, utile pour rendre les enchaînements de traitements plus compréhensibles et plus reproductibles.

Un déroulé type commence par la lecture d’un workflow et de ses étapes, avant la construction progressive d’un DAG en Python. Les exercices peuvent couvrir la planification de tâches, l’enchaînement d’opérations de préparation de données et le suivi d’exécution. La formation relie les manipulations à des cas de pipelines d’analyse et d’ingestion.

Approche pédagogique

1. 1Analyse d’un workflow de données existant ou représentatif
2. 2Identification des tâches et dépendances
3. 3Construction d’un DAG progressif en Python
4. 4Exercices d’automatisation et de planification
5. 5Revue collective de la lisibilité du pipeline

Publics accompagnés

• Data engineers
• Développeurs Python
• Équipes BI techniques
• Étudiants en data engineering

Secteurs d’intervention

Ses 5 formations