Le poste Data Engineer
Partager cette offre
Concevoir, construire et maintenir des infrastructures et des pipelines robustes et performantes
Garantir une architecture et une modélisation des flux optimisés et évolutives.
Apporter une expertise et aider l'équipe à prendre les meilleurs choix techniques.
Transformer la stack legacy vers les nouveaux standards de la Data Platform.
Assurer la qualité, la fiabilité et la gouvernance des données.
Maîtriser la qualité du code et promouvoir les meilleures pratiques.
Collaborer en environnement Agile au sein d'une équipe internationale (Anglais).
Garantir un RUN de qualité (SLA)
Respecter les engagements de sprint et s'inscrire dans une démarche d'amélioration continue.
Profil recherché
Vous disposez des compétences suivantes :
1. Plateforme Data Core (Cloud & Gouvernance)
Expertise sur DataBricks pour la gestion des clusters, l'optimisation des performances des workloads Big Data et la mise en place d'une gouvernance solide.
2. Langages & Modélisation
Maîtrise avancée et pratique SQL pour la modélisation et l'interrogation des données
Expérience avec DBT (Data Build Tool) pour l'industrialisation, la documentation et le testing de nos modèles de données.
Connaissance et pratique de PySpark pour la transformation et le traitement de données.
Une connaissance en Scala sera aussi appréciée.
3. Orchestration & MLOps
Expérience avec Airflow pour la création, le monitoring et l'optimisation des DAGs complexes garantissant la fiabilité de notre chaîne de production Data.
4. Méthodologie & Qualité
Travail en environnement agile (Scrum/Kanban).
Pratique quotidienne de la revue de code et des principes de CI/CD (intégration et déploiement continus) via des outils comme GitHub.
5. Communication Internationale
Votre maîtrise de l'Anglais est indispensable pour interagir au quotidien avec notre équipe internationale et nos partenaires globaux.
Environnement de travail
DBT Avancé
Databricks Confirmé
SQL Avancé
PYSPARK Avancé
Astronomeer Confirmé
AWS Avancé
Python Confirmé
Apache Airflow Avancé
Anglais Courant
Postulez à cette offre !
Trouvez votre prochaine mission parmi +8 000 offres !
-
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
-
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
-
100% gratuit
Aucune commission prélevée sur votre mission freelance.
Data Engineer
CAT-AMANIA