Au sein d'une équipe pluridisciplinaire (chefs de projet, architectes, DevOps, Data Engineers), vous interviendrez sur la conception et le développement de projets d'intégration de données à forte valeur ajoutée.

Vos principales responsabilités incluent :

Développement de jobs d'intégration de données en PySpark, Spark et Python (modes streaming et batch) sur la plateforme Databricks.
Mise en œuvre du CI/CD (GitHub, DevOps, Databricks Asset Bundles), de l’orchestration, du data management et de la sécurité.
Optimisation des jobs existants et des ressources Cloud (GCP et Databricks).
Mise en place de Dashboards FinOps afin de suivre et piloter l'usage des ressources GCP / Databricks.
Participation aux astreintes et au support en production de l'application.
Assurer une formation continue, le partage de connaissances et la rédaction de la documentation technique.

Compétences clés requises

Databricks : Excellente maîtrise de l'administration, de la gestion des catalogues (Unity Catalog), de Delta Lake et de l'optimisation des performances.
Technologies Data : Maîtrise approfondie de PySpark, Spark, Python, SQL et GIT.
Cloud (GCP) : Bonne connaissance de l'écosystème Google Cloud Platform, notamment GCS, Pub/Sub, GKE et les outils d'Alerting.

Qualités professionnelles

Esprit d’équipe, curiosité intellectuelle et envie d’évoluer dans un environnement collaboratif.
Excellente capacité à communiquer, à vulgariser et à partager vos connaissances avec les différents membres de l'équipe.

Candidate profile

Profil recherché

Expérience : Vous justifiez d'une expérience solide (Senior) en Data Engineering, avec une expertise éprouvée sur les environnements de production à grande échelle.
Orientation Solution & Performance : Vous avez une forte sensibilité aux problématiques de performance, d'optimisation des coûts (FinOps) et de qualité de code (bonnes pratiques CI/CD).
Adaptabilité : Vous êtes autonome, rigoureux(se) et capable de vous approprier rapidement des architectures Cloud complexes.
Astreintes : Vous êtes ouvert(e) à participer à des roulements d’astreintes pour garantir le maintien en condition opérationnelle des applications.

Working environment

Discover Nicholson SAS

Londres, Angleterre, Royaume-Uni

< 20 employees

Recruitment agency

We’re a lively and fun bunch of creative, commercial and passionate people, who expect more from themselves and push out the boundaries. As specialists in the technology space, we understand what you do and what you need. Our in-depth market knowledge allows us to provide tailor-made solutions for the best quality outcome, providing an unrivalled ability to understand people requirements specific to different businesses. Working across Europe, Middle East and North America, with seven languages spoken across the team, we really can help you reach the next step

Browse published jobs More informations

Apply to this job!

Find your next career move from +10,000 jobs!

Manage your visibility
Salary, remote work... Define all the criteria that are important to you.
Get discovered
Recruiters come directly to look for their future hires in our CV library.
Join a community
Connect with like-minded tech and IT professionals on a daily basis through our forum.

273 - Data Engineer Senior Databricks / GCP

Nicholson SAS