Job position Data Engineer Senior Databricks / GCP (H/F)
Share this job
Dans le cadre de projets d'intégration de données à forte valeur ajoutée, nous recherchons un Data Engineer Senior maîtrisant l'écosystème Databricks sur GCP.
Vos principales missions :
Conception et développement de jobs d'intégration de données en PySpark, Spark et Python, en modes streaming et batch, sur la plateforme Databricks
Mise en œuvre des chaînes CI/CD (GitHub, DevOps, Databricks Asset Bundles), de l'orchestration, du data management et de la sécurité
Optimisation des jobs et des ressources cloud (GCP et Databricks)
Mise en place de dashboards FinOps pour le suivi de l'usage des ressources GCP / Databricks
Participation aux astreintes et au support en production de l'application
Rédaction de documentation, formation continue et partage de connaissances au sein de l'équipe
Candidate profile
Data Engineer Senior justifiant d'une solide expérience sur Databricks en environnement de production, idéalement sur GCP. Vous avez déjà travaillé sur des architectures data en streaming et en batch, et vous êtes à l'aise avec les enjeux d'industrialisation (CI/CD, sécurité, FinOps). Vous appréciez le travail en équipe et le partage de bonnes pratiques.
Working environment
Vous rejoindrez une équipe pluridisciplinaire composée de chefs de projet, architectes, DevOps et data engineers, dans un contexte de projets data stratégiques à forte visibilité. Stack technique : Databricks, GCP (GCS, Pub/Sub, GKE), PySpark, Python, SQL, GitHub, Databricks Bundles.
Apply to this job!
Find your next career move from +10,000 jobs!
-
Manage your visibility
Salary, remote work... Define all the criteria that are important to you.
-
Get discovered
Recruiters come directly to look for their future hires in our CV library.
-
Join a community
Connect with like-minded tech and IT professionals on a daily basis through our forum.
Data Engineer Senior Databricks / GCP (H/F)
Craftman data
