FormaGroup

Intelligence artificielle et data

Formation Ingénierie des pipelines de données avec Apache Airflow au Maroc

Concevez et exploitez des workflows de données planifiés, dépendants et observables avec Apache Airflow. Les travaux pratiques couvrent la structuration des DAG, la gestion des erreurs, les reprises et le déploiement de pipelines.

Compétences visées

Ce que vous saurez mettre en pratique

01Modéliser un pipeline sous forme de DAG
02Planifier et paramétrer des traitements
03Gérer les dépendances, erreurs et reprises
04Organiser les connexions et paramètres d’exécution
05Surveiller les tâches et diagnostiquer les échecs

Programme indicatif

Module 1

Architecture et concepts Apache Airflow

Apports ciblés, démonstrations, exercices et mise en application sur des situations professionnelles proches du contexte des participants.

Module 2

Création et structuration de DAG

Apports ciblés, démonstrations, exercices et mise en application sur des situations professionnelles proches du contexte des participants.

Module 3

Opérateurs, tâches et dépendances

Apports ciblés, démonstrations, exercices et mise en application sur des situations professionnelles proches du contexte des participants.

Module 4

Paramètres, connexions et secrets

Apports ciblés, démonstrations, exercices et mise en application sur des situations professionnelles proches du contexte des participants.

Module 5

Gestion des erreurs, reprises et alertes

Apports ciblés, démonstrations, exercices et mise en application sur des situations professionnelles proches du contexte des participants.

Module 6

Tests et bonnes pratiques de développement

Apports ciblés, démonstrations, exercices et mise en application sur des situations professionnelles proches du contexte des participants.

Module 7

Déploiement et supervision d’un pipeline

Apports ciblés, démonstrations, exercices et mise en application sur des situations professionnelles proches du contexte des participants.

Public concerné

Data engineers, développeurs Python, analystes et administrateurs de plateformes de données.. Le niveau final, les prérequis et les exercices sont ajustés après qualification des demandes du groupe.

Avec nos formateurs

Ingénierie des pipelines de données avec Apache Airflow avec un formateur du réseau

Toutes les formations

Même domaine

Formations complémentaires