Offre d'emploi Consultant Support Airflow & Spark sur Kubernetes
Île-de-France
LOMEGARD
Le poste Consultant Support Airflow & Spark sur Kubernetes
Partager cette offre
Dans le cadre du renforcement de notre capacité de support N2, nous recherchons des prestataires spécialisés dans l’exploitation et le support de plateformes Big Data.
Contexte :
Notre équipe est responsable du maintien en condition opérationnelle des plateformes suivantes qui tournent sur Kubernetes et bientôt sur OpenShift :
Apache Spark
Apache Airflow/Astronomer
Starburst (trino)
La prestation visera à :
Assurer le support de niveau 2 en production des plateformes mentionnées (PROD).
Intervenir dans la gestion des incidents, l’analyse des root causes et la résolution.
Participer à l’optimisation des traitements Spark sur Kubernetes (tuning, configuration, dimensionnement), à l'optimisation de l'orchestration Airflow, à la gestion des catalogues Starburst
Accompagner les équipes métiers dans l’utilisation efficace et sécurisée des plateformes.
Contribuer à la documentation et à l’amélioration continue de l’écosystème d’exploitation.
Profil recherché
Expérience DATA en PROD
Maîtrise des environnements Kubernetes, Spark, Airflow (à minima 2 technos).
Support sur des services Kubernetes/helm charts
Solide expérience en support de production, Monitoring, observabilité (logs, métriques), investigation d’incidents (technos Dynatrace, Kibana, Grafana)
Bonnes pratiques d’exploitation de traitements data distribués.
Connaissances en tuning Spark, gestion des ressources, profiling applicatif.
Capacités rédactionnelles pour formaliser les procédures d’exploitation et de diagnostic.
Compétences en scripting (Ansible, Python, Bash..) appréciées.
Maitrise chaine CI/CD (Git, jenkins, Gitlab CI, ….)
Connaissances Hashicorp vault Secrets + PKI
Anglais technique
Environnement de travail
LOMEGARD est une société de conseil spécialisée dans les métiers de l’IT qui propose trois offres transverses : PROJECT, SOFTWARE et INFRASTRUCTURE.
Nous accompagnons nos clients dans leurs projets de transformation digitale et d’innovations en créant un environnement de travail plus respectueux pour la planète.
Visitez notre site pour en savoir plus.
Postulez à cette offre !
Trouvez votre prochaine mission parmi +8 000 offres !
-
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
-
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
-
100% gratuit
Aucune commission prélevée sur votre mission freelance.
Consultant Support Airflow & Spark sur Kubernetes
LOMEGARD
