Job position Data Engineer
Share this job
Intégré(e) aux équipes Data (Data Engineers, BI, Sécurité, Infrastructure), vous interviendrez sur la conception, le développement et l’industrialisation des pipelines data dans un environnement Azure.
Vos principales responsabilités :Concevoir des pipelines d’ingestion et de transformation (batch et near-real-time)
Développer et maintenir des flux sous Azure Data Factory
Implémenter des traitements Spark via Databricks
Mettre en place la qualité des données, le monitoring et la reprise sur erreur
Versionner, packager et livrer via des pipelines CI/CD
Collaborer avec les équipes BI, sécurité et infra
Respect des standards de développement et de nommage
Mise en œuvre de pipelines CI/CD
Documentation et maintien des bonnes pratiques Data
Contribution à la performance et à la robustesse des traitements
Candidate profile
Data Engineer Azure confirmé 5 ans minimum capable d’intervenir sur des projets data structurants, à fort volume et à forte exigence d’industrialisation.
Cloud : Microsoft Azure
Data ingestion / orchestration : Azure Data Factory
Traitement : Databricks, Spark
Stockage : Azure Data Lake Storage Gen2
Langages : Python, SQL
Versioning / CI/CD : Git, Azure DevOps
Data quality / gouvernance : règles de qualité, monitoring (bonus : Purview, Delta Lake)
Working environment
Plateforme Data Azure à grande échelle
Projets data long terme
Contexte grand compte, structuré et exigeant
Apply to this job!
Find your next career move from +10,000 jobs!
-
Manage your visibility
Salary, remote work... Define all the criteria that are important to you.
-
Get discovered
Recruiters come directly to look for their future hires in our CV library.
-
Join a community
Connect with like-minded tech and IT professionals on a daily basis through our forum.
Data Engineer
Bifora