Job position Expert databricks
Share this job
Maîtrise approfondie de Databricks (workspace, notebooks, clusters, jobs, Delta Lake, optimisation, governance).
Excellente connaissance de l’écosystème Azure : Azure Data Lake, Azure Data Factory, Azure DevOps, Azure SQL, Key Vault, Azure Monitor…
Expérience concrète sur la mise en place de frameworks qualité data :
DQCx (Data Quality Checks)
DAB (Data Assurance & Benchmark ou Data Accountability selon standards internes)
Maitrise du langage PySpark et du traitement de la donnée à grande échelle.
Connaissance des workflows CI/CD data.
Compréhension avancée des enjeux DataOps / MLOps.
Capacité à accompagner, évangéliser et structurer les bonnes pratiques.
Excellente communication, autonomie, capacité à gérer des stakeholders techniques et métier.
Force de proposition sur l’amélioration continue et l’architecture data.
Candidate profile
Définir et implémenter les processus DQCx et DAB dans l’environnement Databricks Azure.
Accompagner les équipes data engineering et analytics sur les standards qualité.
Participer à l’architecture data et à la structuration des pipelines Databricks.
Mettre en place des bonnes pratiques d’industrialisation (CI/CD, tests, monitoring).
Former et guider les équipes internes sur l’usage optimal de Databricks.
Optimiser la performance des traitements existants (Delta Lake, pipelines…).
Assurer un rôle de référent technique sur Databricks.
Minimum 5 ans d’expérience en environnement Data Engineering.
Expérience démontrée sur Databricks + Azure via projets réels (obligatoire).
Exposition à des environnements complexes et industriels.
Apply to this job!
Find your next career move from +900 jobs!
-
Manage your visibility
Salary, remote work... Define all the criteria that are important to you.
-
Get discovered
Recruiters come directly to look for their future hires in our CV library.
-
Join a community
Connect with like-minded tech and IT professionals on a daily basis through our forum.
Expert databricks
HAYS France