Offre d'emploi DATA ENGINEER AZURE DATABRICKS

Bonjour,

Pour le compte de notre client nous recherchons un data engineer Azure databtricks.

Contexte

Vous intervenez sur des plateformes Big Data à forte volumétrie, orientées Lakehouse, nécessitant des traitements distribués, performants et hautement scalables.

Missions principales

• Concevoir et maintenir une architecture Lakehouse Databricks

• Développer des pipelines de données distribués avec Spark

• Mettre en place des tables fiables et gouvernées via Delta Lake

• Construire et maintenir des pipelines automatisés avec Delta Live Tables

• Exposer les données via SQL Warehouse pour les usages BI et analytiques

• Optimiser les performances, la qualité et la scalabilité des traitements

• Travailler en étroite collaboration avec les équipes Data Science et BI

Stack technique

• Databricks : Lakehouse, Delta Lake, Delta Live Tables, SQL Warehouse

• Azure : ADLS Gen2, services d’intégration Azure

• Langages : Python, SQL, Spark

• DataOps / MLOps : CI/CD, orchestration, monitoring

• Architecture : Big Data distribué, streaming et batch

Compétences requises

• Solide expertise Spark / Databricks

• Maîtrise des concepts Big Data et des environnements à forte volumétrie

• Très bonne connaissance de Python et SQL

• Capacité à concevoir des architectures complexes et robustes

Profil recherché

• Formation en informatique / data

• 4+ ans d’expérience en Data Engineering Big Data

• Forte capacité d’analyse et de résolution de problèmes

• À l’aise dans des environnements complexes et exigeants