Job position Senior Data engineer
Share this job
Métier : Data Management
Fonction : Software engineer
Type de facturation : Assistance Technique (facturation avec un taux journalier)
Technologies et outils : AWSSparkSnowflakeAirflow
Secteurs d'activités : Services Informatiques, Conseil en organisation et stratégie
Description et livrables de la prestation :
- Rattaché au Responsable Data Platform, missions principales :
- Développer des pipelines ETL sur AWS vers Snowflake
- Mettre en place du stockage optimisé avec des technologies lakehouse, notamment DeltaLake
- Créer des jobs manipulant la donnée avec SQL et Python (pandas, Polars)
- Traiter de gros volumes de données avec PySpark
- Développer et maintenir des infrastructures avec de l’IaC, principalement avec Terraform
- Orchestrer les traitements via Airflow
- Déployer et maintenir des applications en CI/CD
- Participer à la conception d’architecture et aux réflexions techniques
- Avoir une bonne capacité de vulgarisation et de communication
- Participer aux rituels agiles et contribuer à la documentation technique et fonctionnelle
Expérience requise : 5 à 10 ans en tant que Data Engineer, avec expérience significative sur AWS.
Plus : Un positionnement en tant que techlead, expérience dans un contexte BI, ou en DevOps serait un avantage.
Candidate profile
Apply to this job!
Find your next career move from +10,000 jobs!
-
Manage your visibility
Salary, remote work... Define all the criteria that are important to you.
-
Get discovered
Recruiters come directly to look for their future hires in our CV library.
-
Join a community
Connect with like-minded tech and IT professionals on a daily basis through our forum.
Senior Data engineer
Codezys