Offre d'emploi Expert Spark (Spark /Airflow /Superset )
La Défense (92)
AVA2I
Le poste Expert Spark (Spark /Airflow /Superset )
Partager cette offre
Dans le cadre de son initiative Big Data FR sur plateforme Open Source, GRDF recherche un Expert Spark afin de renforcer son équipe Data.
L’objectif est de contribuer à la conception, à l’optimisation et au déploiement de pipelines Big Data à grande échelle, avec un focus sur la performance et la fiabilité.
Participer à la conception et au développement de pipelines de données distribués basés sur Spark.
Optimiser la performance des traitements et garantir la scalabilité des solutions.
Déployer, monitorer et maintenir les workflows de données via Airflow.
Créer et améliorer des dashboards et visualisations de données avec Superset.
Collaborer avec les équipes Data Engineering, Data Science et métiers pour intégrer les besoins fonctionnels dans la plateforme Big Data.
Assurer une veille technologique et proposer des solutions innovantes dans l’écosystème Big Data Open Source.
Profil recherché
Expertise Spark (PySpark, Spark SQL, optimisation de jobs, tuning des performances).
Expérience sur l’orchestration de workflows avec Airflow.
Connaissance de Superset (ou outils similaires de dataviz).
Maîtrise d’un environnement Big Data Open Source (Hadoop, Hive, HDFS, Kafka, etc.).
Compétences en Python et SQL avancé.
Bonne compréhension des enjeux liés à la scalabilité et à la résilience des plateformes de données.
Peu importe la séniorité : la priorité est l’expertise sur Spark.
Passionné par les environnements Big Data et Open Source.
Esprit analytique, orienté résolution de problèmes et performance.
Capacité à travailler en équipe agile dans un contexte collaboratif.
Environnement de travail
Expertise Spark (PySpark, Spark SQL, optimisation de jobs, tuning des performances).
Expérience sur l’orchestration de workflows avec Airflow.
Connaissance de Superset (ou outils similaires de dataviz).
Maîtrise d’un environnement Big Data Open Source (Hadoop, Hive, HDFS, Kafka, etc.).
Compétences en Python et SQL avancé.
Bonne compréhension des enjeux liés à la scalabilité et à la résilience des plateformes de données.
Peu importe la séniorité : la priorité est l’expertise sur Spark.
Passionné par les environnements Big Data et Open Source.
Esprit analytique, orienté résolution de problèmes et performance.
Capacité à travailler en équipe agile dans un contexte collaboratif.
Postulez à cette offre !
Trouvez votre prochaine mission parmi +8 000 offres !
-
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
-
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
-
100% gratuit
Aucune commission prélevée sur votre mission freelance.
Expert Spark (Spark /Airflow /Superset )
AVA2I
