Job position Expert Spark (Spark /Airflow /Superset )
Share this job
Dans le cadre de son initiative Big Data FR sur plateforme Open Source, GRDF recherche un Expert Spark afin de renforcer son équipe Data.
L’objectif est de contribuer à la conception, à l’optimisation et au déploiement de pipelines Big Data à grande échelle, avec un focus sur la performance et la fiabilité.
Participer à la conception et au développement de pipelines de données distribués basés sur Spark.
Optimiser la performance des traitements et garantir la scalabilité des solutions.
Déployer, monitorer et maintenir les workflows de données via Airflow.
Créer et améliorer des dashboards et visualisations de données avec Superset.
Collaborer avec les équipes Data Engineering, Data Science et métiers pour intégrer les besoins fonctionnels dans la plateforme Big Data.
Assurer une veille technologique et proposer des solutions innovantes dans l’écosystème Big Data Open Source.
Candidate profile
Expertise Spark (PySpark, Spark SQL, optimisation de jobs, tuning des performances).
Expérience sur l’orchestration de workflows avec Airflow.
Connaissance de Superset (ou outils similaires de dataviz).
Maîtrise d’un environnement Big Data Open Source (Hadoop, Hive, HDFS, Kafka, etc.).
Compétences en Python et SQL avancé.
Bonne compréhension des enjeux liés à la scalabilité et à la résilience des plateformes de données.
Peu importe la séniorité : la priorité est l’expertise sur Spark.
Passionné par les environnements Big Data et Open Source.
Esprit analytique, orienté résolution de problèmes et performance.
Capacité à travailler en équipe agile dans un contexte collaboratif.
Working environment
Expertise Spark (PySpark, Spark SQL, optimisation de jobs, tuning des performances).
Expérience sur l’orchestration de workflows avec Airflow.
Connaissance de Superset (ou outils similaires de dataviz).
Maîtrise d’un environnement Big Data Open Source (Hadoop, Hive, HDFS, Kafka, etc.).
Compétences en Python et SQL avancé.
Bonne compréhension des enjeux liés à la scalabilité et à la résilience des plateformes de données.
Peu importe la séniorité : la priorité est l’expertise sur Spark.
Passionné par les environnements Big Data et Open Source.
Esprit analytique, orienté résolution de problèmes et performance.
Capacité à travailler en équipe agile dans un contexte collaboratif.
Apply to this job!
Find your next career move from +1,000 jobs!
-
Manage your visibility
Salary, remote work... Define all the criteria that are important to you.
-
Get discovered
Recruiters come directly to look for their future hires in our CV library.
-
Join a community
Connect with like-minded tech and IT professionals on a daily basis through our forum.
Expert Spark (Spark /Airflow /Superset )
AVA2I