Le poste Data Engineer (AWS, Snowflake & Terraform)
Partager cette offre
Notre client souhaite renforcer son équipe DataPlatform.
Vous rejoindrez une équipe composée de 3 Data Engineer, 1 DB Admin, 1 Responsbale BI, 1 Product Owner appuyé par des DevOps mettant à disposition les infrastructures de gestion de la donnée.
Vous aurez la charge de 3 principales missions :
1° Implémentation de nouveaux flux de données sur AWS & Terraform avec Python/Airflow (COLD et STREAMING)
· Implémentation des flux de données de l’extraction à l’exposition des données via Python/Airflow Managé ou avec Nifi pour les données « cold » et « streaming »
2° On vous demandera pour chacun des projets :
· Code Review entre les data engineers
· Réalisation des tests unitaire, de non-régression et d’intégration
· Mise à jour de la documentation sous Confluence
· Mettre à jour la documentation dans confluence.
· Réaliser les tests unitaires et d’intégration.
· Respecter les bonnes pratiques de développements
3° Maintenance corrective des flux de données
1 à 2 jrs de remote
Localisé Paris 12e
Profil recherché
En terme d'environnement :
-AWS, Terraform, ingestion dans Datawarehouse Snowflake.
-Nifi pour l’ingestion sur du Kafka/API et AWS Lambda sous Python et Airflow.
-SQS/SNS/Snowpipe (Snowflake)
-Gitlab et CI/CD.
Postulez à cette offre !
Trouvez votre prochaine mission parmi +8 000 offres !
-
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
-
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
-
100% gratuit
Aucune commission prélevée sur votre mission freelance.
Data Engineer (AWS, Snowflake & Terraform)
Trait d'Union Consulting
