Share this job
Dans le cadre du développement de projets Data stratégiques, nous recherchons un Consultant Databricks / Data Engineer confirmé pour accompagner la conception, le développement et l'optimisation de solutions de traitement et de valorisation des données.
Vous interviendrez dans un environnement Cloud moderne, au sein d'une équipe Data, afin de contribuer à la mise en place de pipelines de données performants, fiables et évolutifs.
Missions principalesConcevoir, développer et maintenir des pipelines de données sur Databricks.
Développer et optimiser les traitements Data avec Python, PySpark et SQL.
Mettre en place des processus ETL/ELT pour l'intégration et la transformation des données.
Exploiter Delta Lake et les architectures Lakehouse.
Participer à l'industrialisation et à l'automatisation des flux Data.
Optimiser les performances des traitements Spark.
Assurer la qualité, la fiabilité et la sécurité des données.
Collaborer avec les Data Engineers, Data Analysts et équipes métiers.
Participer aux bonnes pratiques de développement, de documentation et de CI/CD.
Candidate profile
Minimum 3 ans d'expérience en Data Engineering.
Expérience concrète sur des projets Databricks en production.
Bonne maîtrise des environnements Big Data et Cloud.
Autonomie, rigueur et esprit d'analyse.
Capacité à travailler en équipe et à proposer des solutions techniques adaptées.
Une certification Databricks constitue un véritable atout.
Working environment
Indispensables :
Databricks : maîtrise confirmée.
Python / PySpark : très bonne maîtrise.
SQL : niveau avancé.
Apache Spark : expérience significative.
Delta Lake et architecture Lakehouse.
Développement et optimisation de pipelines ETL/ELT.
Compétences appréciées :
Cloud Azure, AWS ou GCP.
Azure Data Factory.
Unity Catalog.
Git, CI/CD et DevOps.
Data Modeling et Data Governance.
Power BI ou autres outils de visualisation.
Apply to this job!
Find your next job from +10,000 jobs!
Manage your visibility
Salary, remote work... Define all the criteria that are important to you.
Get discovered
Recruiters come directly to look for their future hires in our CV library.
Join a community
Connect with like-minded tech and IT professionals on a daily basis through our forum.
Consultant Databricks
DATAMED RESEARCH