En bref
- La formation porte sur l’ingénierie des pipelines de données avec Apache Airflow.
- Les participants visés sont des data engineers, développeurs Python, analystes et administrateurs de plateformes de données.
- Les interventions peuvent se dérouler en présentiel ou à distance.
- La mission concerne la région Béni Mellal Khénifra, notamment Béni Mellal, Khouribga et Khénifra.
- Les travaux pratiques couvrent les DAG, les reprises sur erreur, les tests, le déploiement et la supervision.
Villes concernées
Béni MellalKhouribgaKhénifraFquih Ben SalahOued Zem
Votre rôle chez FormaGroup
Vous accompagnerez des participants dans la conception et l’exploitation de workflows de données planifiés, dépendants et observables. La mission s’adresse à des entreprises et à des particuliers de la région, avec des interventions possibles en présentiel ou à distance.
Missions confiées
- 1Présenter l’architecture et les concepts essentiels d’Apache Airflow, puis montrer comment modéliser un pipeline de données sous forme de DAG.
- 2Guider les participants dans la création et la structuration de DAG, en travaillant sur les tâches, les opérateurs et la définition de leurs dépendances.
- 3Faire pratiquer la planification et le paramétrage des traitements, ainsi que l’organisation des paramètres d’exécution, des connexions et des secrets.
- 4Encadrer des exercices de gestion des erreurs, de reprise des tâches et de configuration des alertes afin de rendre les workflows plus robustes.
- 5Aborder les tests et les bonnes pratiques de développement, puis accompagner les participants dans le déploiement et la supervision d’un pipeline.
- 6Apprendre aux participants à surveiller les tâches Airflow et à diagnostiquer les échecs à partir de situations pratiques.
Programme de formation à animer
Une maîtrise pédagogique des thèmes suivants est attendue :
Module 1Architecture et concepts Apache Airflow
Module 2Création et structuration de DAG
Module 3Opérateurs, tâches et dépendances
Module 4Paramètres, connexions et secrets
Module 5Gestion des erreurs, reprises et alertes
Module 6Tests et bonnes pratiques de développement
Module 7Déploiement et supervision d’un pipeline
Objectifs pédagogiques
Voir le programme complet de la formation →- Modéliser un pipeline sous forme de DAG
- Planifier et paramétrer des traitements
- Gérer les dépendances, erreurs et reprises
- Organiser les connexions et paramètres d’exécution
- Surveiller les tâches et diagnostiquer les échecs
Public à former
La formation s’adresse aux data engineers, développeurs Python, analystes et administrateurs de plateformes de données. Elle leur permet de concevoir, planifier et surveiller des workflows avec Apache Airflow.
Approche pédagogique attendue
- Alterner les explications sur les concepts Airflow et des exercices guidés de modélisation de pipelines sous forme de DAG.
- Faire construire des workflows intégrant opérateurs, tâches, dépendances, paramètres et connexions.
- Proposer des mises en situation pour traiter des erreurs, organiser les reprises et interpréter des alertes.
- Accompagner des exercices de tests, de déploiement et de supervision, avec un diagnostic des échecs de tâches.
- Adapter les consignes et le rythme aux profils techniques présents, en présentiel comme à distance.
Profil recherché
- Vous maîtrisez Apache Airflow et êtes capable d’expliquer clairement son architecture, la conception des DAG, les dépendances entre tâches et la planification des traitements.
- Vous savez enseigner la gestion des connexions, des paramètres et des secrets, ainsi que les mécanismes de gestion des erreurs, de reprise et d’alerte.
- Vous pouvez guider des participants dans des exercices de tests, de déploiement, de supervision et de diagnostic de pipelines de données.
- Vous avez une expérience de la formation d’adultes et savez adapter vos explications à des data engineers, développeurs Python, analystes et administrateurs de plateformes de données.
Atouts appréciés
- Vous savez relier les notions d’Airflow à des cas concrets de conception et d’exploitation de workflows de données.
- Vous êtes à l’aise pour animer des sessions en présentiel comme à distance et accompagner des publics aux profils techniques variés.
Disponibilité et mobilité
Disponibilité
Date de démarrage non précisée ; disponibilité à convenir avec FormaGroup.
Mobilité
Interventions dans la région Béni Mellal Khénifra, notamment à Béni Mellal, Khouribga, Khénifra, Fquih Ben Salah et Oued Zem. Le présentiel et le distanciel sont proposés comme options.
Compétences clés
Apache AirflowConception de DAGPlanification de workflowsGestion des dépendancesGestion des erreursTests de pipelinesSupervision de traitementsFormation d’adultes
Mots-clés de l’offre
#Ingénierie des données#Pipelines de données#Apache Airflow#DAG#Orchestration de workflows#Planification des traitements#Supervision des tâches
Critères de l’annonce
- Secteur d’activité
- Informatique et données
- Région
- Béni-Mellal-Khénifra
- Travail à distance
- Hybride possible
- Type de contrat
- Mission indépendante (freelance)
- Disponibilité
- Immédiate
- Niveau d’expérience
- Expérience entre 2 ans et 5 ans - Expérience entre 5 ans et 10 ans
- Niveau d’étude
- Bac+3 - Bac+5 et plus
- Langues
- Français
Pour cette mission FormaGroup, vous mettrez votre maîtrise d’Apache Airflow au service d’apprentissages pratiques, de la modélisation des DAG au diagnostic des pipelines.
Postuler maintenant