Intervenant(e) Apache Spark et PySpark — Laâyoune Sakia El Hamra

Votre rôle chez FormaGroup

Cette mission consiste à accompagner des entreprises et des particuliers dans la prise en main de Spark et de son interface Python. Vous aiderez les participants à manipuler des volumes importants de données, à construire des traitements distribués et à améliorer leurs pipelines analytiques.

Missions confiées

1. 1Présenter l’architecture Spark et son environnement d’exécution, puis expliquer comment ces éléments s’inscrivent dans le traitement distribué des données.
2. 2Guider les participants dans la manipulation de DataFrames avec PySpark, notamment pour réaliser des transformations, des agrégations et des jointures.
3. 3Faire pratiquer le chargement et l’écriture de données dans des formats courants, en abordant les choix de partitionnement et leur incidence sur les traitements.
4. 4Accompagner la construction d’un pipeline de traitement de bout en bout, réutilisable et adapté à un cas d’analyse de données.
5. 5Montrer comment diagnostiquer les performances et optimiser les transformations et les jointures à partir d’exercices pratiques.
6. 6Adapter les explications et les activités au niveau et aux besoins des participants, qu’ils soient data engineers, data analysts ou développeurs Python.

Programme de formation à animer

Une maîtrise pédagogique des thèmes suivants est attendue :

Public à former

Approche pédagogique attendue

• Vous alternez les explications sur l’architecture Spark avec des exercices guidés sur les DataFrames et les opérations PySpark.
• Vous faites réaliser des travaux pratiques de chargement, de transformation, d’agrégation, de jointure et d’écriture de données.
• Vous accompagnez la construction d’un pipeline de bout en bout afin que les participants puissent relier les différentes étapes d’un traitement.
• Vous proposez des exercices de diagnostic permettant d’observer l’effet du partitionnement et des choix de transformation sur les performances.

Profil recherché

• Vous disposez d’une expertise confirmée en traitement distribué des données avec Apache Spark et PySpark.
• Vous avez une expérience de la formation d’adultes et savez rendre accessibles les notions techniques à des publics professionnels.
• Vous êtes capable d’enseigner la manipulation des DataFrames, les transformations distribuées, le chargement et l’écriture de données, ainsi que les principes d’optimisation et de diagnostic de performance.

Atouts appréciés

• Vous savez illustrer vos explications par des exemples de pipelines analytiques et des exercices proches des usages professionnels.
• Vous pouvez adapter vos activités à des participants ayant des rôles différents en ingénierie des données, en analyse ou en développement Python.

Disponibilité et mobilité

Compétences clés

Mots-clés de l’offre