En bref
- Le sujet de la mission est l’ingénierie des pipelines de données avec Apache Airflow.
- Les formations s’adressent aux data engineers, développeurs Python, analystes et administrateurs de plateformes de données.
- La mission couvre la modélisation, le développement, le déploiement et la supervision de workflows.
- Le présentiel et la formation à distance sont des modalités possibles dans la région Marrakech Safi.
- Les interventions peuvent concerner Marrakech, Safi et Essaouira.
Villes concernées
MarrakechSafiEssaouira
Votre rôle chez FormaGroup
Cette mission consiste à accompagner des entreprises et des particuliers dans l’apprentissage de workflows de données planifiés, structurés et observables. Les formations peuvent être proposées en présentiel ou à distance dans la région Marrakech Safi, notamment à Marrakech, Safi et Essaouira.
Missions confiées
- 1Présenter l’architecture et les concepts clés d’Apache Airflow, puis guider les participants dans la modélisation d’un pipeline sous forme de DAG.
- 2Encadrer la création et la structuration de DAG, en faisant pratiquer la configuration des tâches, des opérateurs et de leurs dépendances.
- 3Faire travailler les participants sur la planification et le paramétrage des traitements, ainsi que sur l’organisation des paramètres, connexions et secrets.
- 4Préparer des exercices de diagnostic pour apprendre à gérer les erreurs, configurer les reprises et mettre en place des alertes adaptées.
- 5Accompagner les apprenants dans les tests et l’application de bonnes pratiques de développement pour fiabiliser leurs workflows.
- 6Guider le déploiement et la supervision d’un pipeline, puis entraîner les participants à surveiller les tâches et à diagnostiquer les échecs.
Programme de formation à animer
Une maîtrise pédagogique des thèmes suivants est attendue :
Module 1Architecture et concepts Apache Airflow
Module 2Création et structuration de DAG
Module 3Opérateurs, tâches et dépendances
Module 4Paramètres, connexions et secrets
Module 5Gestion des erreurs, reprises et alertes
Module 6Tests et bonnes pratiques de développement
Module 7Déploiement et supervision d’un pipeline
Objectifs pédagogiques
Voir le programme complet de la formation →- Modéliser un pipeline sous forme de DAG
- Planifier et paramétrer des traitements
- Gérer les dépendances, erreurs et reprises
- Organiser les connexions et paramètres d’exécution
- Surveiller les tâches et diagnostiquer les échecs
Public à former
Les formations s’adressent aux data engineers, aux développeurs Python, aux analystes et aux administrateurs de plateformes de données. Elles portent sur la conception et l’exploitation de workflows avec Apache Airflow.
Approche pédagogique attendue
- Faire construire aux participants des DAG à partir de scénarios de pipelines, en travaillant les tâches, les opérateurs et les dépendances.
- Proposer des exercices de planification et de paramétrage qui mettent en pratique les connexions, les paramètres et les secrets d’exécution.
- Utiliser des cas de panne pour entraîner les apprenants à configurer les reprises et les alertes, puis à diagnostiquer les échecs.
- Faire pratiquer les tests, le déploiement et la supervision d’un pipeline afin de relier le développement à son exploitation.
- Adapter les explications et les exercices au niveau et au contexte des participants.
Profil recherché
- Vous maîtrisez Apache Airflow et l’ingénierie des pipelines de données, notamment la création de DAG, la gestion des dépendances, le paramétrage et la supervision.
- Vous êtes capable d’enseigner de manière concrète l’architecture d’Airflow, les opérateurs et les tâches, ainsi que la gestion des erreurs, les reprises et les alertes.
- Vous avez une expérience de la formation d’adultes et savez rendre les notions accessibles à des data engineers, développeurs Python, analystes et administrateurs de plateformes de données.
Atouts appréciés
- Vous savez adapter les exemples et les exercices aux profils et aux besoins des participants, qu’ils viennent du développement Python ou de l’exploitation de plateformes de données.
- Vous pouvez faire le lien entre les bonnes pratiques de développement, les tests de workflows et leur mise en service et supervision.
Disponibilité et mobilité
Disponibilité
À convenir avec FormaGroup.
Mobilité
Mission dans la région Marrakech Safi, notamment à Marrakech, Safi et Essaouira. Le présentiel et la formation à distance sont proposés comme modalités possibles.
Compétences clés
Apache AirflowConception de DAGGestion des dépendancesParamétrage des traitementsConnexions et secretsGestion des erreursTests de pipelinesSupervision des workflowsFormation d’adultes
Mots-clés de l’offre
#Apache Airflow#Pipelines de données#Workflows planifiés#DAG de données#Orchestration de tâches#Gestion des dépendances#Supervision de pipelines#Formation data engineering
Critères de l’annonce
- Secteur d’activité
- Informatique et données
- Région
- Marrakech-Safi
- Travail à distance
- Hybride possible
- Type de contrat
- Mission indépendante (freelance)
- Disponibilité
- À convenir
- Niveau d’expérience
- Expérience entre 2 ans et 5 ans - Expérience entre 5 ans et 10 ans
- Niveau d’étude
- Bac+3 - Bac+5 et plus
- Langues
- Français
Vous souhaitez transmettre votre expertise d’Apache Airflow et aider des professionnels à concevoir des pipelines de données fiables ? Cette mission FormaGroup s’adresse aux formateurs et formatrices en mesure d’animer des ateliers pratiques dans la région Marrakech Safi.
Postuler maintenant