Formateur·rice Spark et PySpark pour le traitement distribué — Région Casablanca Settat

Villes concernées

Votre rôle chez FormaGroup

Vous accompagnerez des data engineers, des data analysts et des développeurs Python dans la prise en main de Spark pour traiter des volumes importants de données. La mission peut être réalisée en présentiel ou à distance, selon les modalités retenues.

Missions confiées

1. 1Présenter l’architecture Spark et son environnement d’exécution, puis expliquer comment ils interviennent dans le traitement distribué des données.
2. 2Guider les participants dans la manipulation des DataFrames avec PySpark, en travaillant sur les opérations et transformations courantes.
3. 3Encadrer des exercices de chargement et d’écriture de données dans des formats courants, ainsi que leur partitionnement.
4. 4Faire construire des transformations, agrégations et jointures adaptées à des besoins d’analyse de grands volumes de données.
5. 5Apprendre aux participants à diagnostiquer les performances et à optimiser leurs transformations et leurs jointures.
6. 6Accompagner la réalisation d’un pipeline de traitement de bout en bout afin de mettre en pratique la construction de traitements distribués et réutilisables.

Programme de formation à animer

Une maîtrise pédagogique des thèmes suivants est attendue :

Public à former

Approche pédagogique attendue

• Vous alternez explications sur l’architecture Spark et exercices de manipulation de DataFrames avec PySpark.
• Vous proposez des mises en pratique autour du chargement, de l’écriture, des transformations, des agrégations et des jointures.
• Vous faites travailler les participants sur le partitionnement, les formats de données et le diagnostic de performance.
• Vous accompagnez la construction d’un pipeline de bout en bout pour consolider les savoir-faire abordés pendant la formation.

Profil recherché

• Vous disposez d’une expertise confirmée en traitement distribué des données avec Apache Spark et PySpark, et pouvez enseigner l’architecture Spark, les DataFrames, les transformations et les jointures.
• Vous avez une expérience de la formation d’adultes et savez rendre accessibles les notions techniques à des profils de data engineers, data analysts et développeurs Python.
• Vous savez préparer et encadrer des exercices pratiques portant sur le chargement, l’écriture, le partitionnement et l’optimisation de données.
• Vous êtes en mesure d’accompagner les participants dans la réalisation d’un pipeline de traitement de bout en bout.

Disponibilité et mobilité

Compétences clés

Mots-clés de l’offre