Job Vacancy Consultant Support Airflow & Spark sur Kubernetes
Ile-de-France
LOMEGARD
Job position Consultant Support Airflow & Spark sur Kubernetes
Share this job
Dans le cadre du renforcement de notre capacité de support N2, nous recherchons des prestataires spécialisés dans l’exploitation et le support de plateformes Big Data.
Contexte :
Notre équipe est responsable du maintien en condition opérationnelle des plateformes suivantes qui tournent sur Kubernetes et bientôt sur OpenShift :
Apache Spark
Apache Airflow/Astronomer
Starburst (trino)
La prestation visera à :
Assurer le support de niveau 2 en production des plateformes mentionnées (PROD).
Intervenir dans la gestion des incidents, l’analyse des root causes et la résolution.
Participer à l’optimisation des traitements Spark sur Kubernetes (tuning, configuration, dimensionnement), à l'optimisation de l'orchestration Airflow, à la gestion des catalogues Starburst
Accompagner les équipes métiers dans l’utilisation efficace et sécurisée des plateformes.
Contribuer à la documentation et à l’amélioration continue de l’écosystème d’exploitation.
Candidate profile
Expérience DATA en PROD
Maîtrise des environnements Kubernetes, Spark, Airflow (à minima 2 technos).
Support sur des services Kubernetes/helm charts
Solide expérience en support de production, Monitoring, observabilité (logs, métriques), investigation d’incidents (technos Dynatrace, Kibana, Grafana)
Bonnes pratiques d’exploitation de traitements data distribués.
Connaissances en tuning Spark, gestion des ressources, profiling applicatif.
Capacités rédactionnelles pour formaliser les procédures d’exploitation et de diagnostic.
Compétences en scripting (Ansible, Python, Bash..) appréciées.
Maitrise chaine CI/CD (Git, jenkins, Gitlab CI, ….)
Connaissances Hashicorp vault Secrets + PKI
Anglais technique
Working environment
LOMEGARD est une société de conseil spécialisée dans les métiers de l’IT qui propose trois offres transverses : PROJECT, SOFTWARE et INFRASTRUCTURE.
Nous accompagnons nos clients dans leurs projets de transformation digitale et d’innovations en créant un environnement de travail plus respectueux pour la planète.
Visitez notre site pour en savoir plus.
Apply to this job!
Find your next career move from +9,000 jobs!
-
Manage your visibility
Salary, remote work... Define all the criteria that are important to you.
-
Get discovered
Recruiters come directly to look for their future hires in our CV library.
-
Join a community
Connect with like-minded tech and IT professionals on a daily basis through our forum.
Consultant Support Airflow & Spark sur Kubernetes
LOMEGARD
