Job position Data Engineer (AWS, Snowflake & Terraform)
Share this job
Notre client souhaite renforcer son équipe DataPlatform.
Vous rejoindrez une équipe composée de 3 Data Engineer, 1 DB Admin, 1 Responsbale BI, 1 Product Owner appuyé par des DevOps mettant à disposition les infrastructures de gestion de la donnée.
Vous aurez la charge de 3 principales missions :
1° Implémentation de nouveaux flux de données sur AWS & Terraform avec Python/Airflow (COLD et STREAMING)
· Implémentation des flux de données de l’extraction à l’exposition des données via Python/Airflow Managé ou avec Nifi pour les données « cold » et « streaming »
2° On vous demandera pour chacun des projets :
· Code Review entre les data engineers
· Réalisation des tests unitaire, de non-régression et d’intégration
· Mise à jour de la documentation sous Confluence
· Mettre à jour la documentation dans confluence.
· Réaliser les tests unitaires et d’intégration.
· Respecter les bonnes pratiques de développements
3° Maintenance corrective des flux de données
1 à 2 jrs de remote
Localisé Paris 12e
Candidate profile
En terme d'environnement :
-AWS, Terraform, ingestion dans Datawarehouse Snowflake.
-Nifi pour l’ingestion sur du Kafka/API et AWS Lambda sous Python et Airflow.
-SQS/SNS/Snowpipe (Snowflake)
-Gitlab et CI/CD.
Apply to this job!
Find your next career move from +9,000 jobs!
-
Manage your visibility
Salary, remote work... Define all the criteria that are important to you.
-
Get discovered
Recruiters come directly to look for their future hires in our CV library.
-
Join a community
Connect with like-minded tech and IT professionals on a daily basis through our forum.
Data Engineer (AWS, Snowflake & Terraform)
Trait d'Union Consulting
