Le poste Data engineer senior Pyspark AWS
Partager cette offre
Data engineer senior
Travailler l'architecture du produit avec le Tech Lead
Mettre en place la stack technique
Apporter une expertise sur la constitution de datasets & KPIs
Assurer la qualité des traitements et des données
Etre capable de créer des KPIs à partir des données du Datalake
Maîtriser les modèles de données et les outils de transformation
Mettre en place des indicateurs de mesure de qualité sur chaque développement engagé pour assurer la bonne mise à disposition de la donnée
Mission située à Lille
Profil recherché
Une expérience d'au moins 5 ans en tant que Data Engineer
Une grande appétence technique
Comprendre le cycle de vie de la donnée
Aimer travailler en agilité dans un environnement collaboratif
Avoir un sens du service développé
Savoir travailler en autonomie
Environnement de travail
stack technique (non exhaustive) est la suivante :
Datalake : S3, Glue Table (AWS)
Transfo : Spark, Databricks, Athena
Orchestration: Airflow
Versionning : GitHub
Langage : Python, SQL
Gestion des sources : Kafka
Postulez à cette offre !
Trouvez votre prochaine mission parmi +15 000 offres !
-
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
-
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
-
100% gratuit
Aucune commission prélevée sur votre mission freelance.
Data engineer senior Pyspark AWS
skiils