Share this job
Nous recherchons un Data Engineer Senior pour renforcer une équipe Data et intervenir sur une plateforme AWS traitant d'importants volumes de données.
Vous participerez à la conception, à l'optimisation et à l'industrialisation des pipelines Data, avec des enjeux forts de performance, de qualité et de scalabilité.
Missions principalesConcevoir, développer et maintenir des pipelines Data sur AWS.
Développer et optimiser les traitements en Python, SQL et PySpark.
Orchestrer les workflows avec Airflow / MWAA.
Optimiser les traitements Spark sur des volumes importants.
Concevoir et faire évoluer les modèles de données au sein du Data Lake.
Garantir la qualité, la fiabilité et la performance des données.
Mettre en place le monitoring et optimiser les coûts des traitements.
Collaborer avec les équipes Data Science et métiers.
Exploiter les outils d'IA générative et agentique pour améliorer les pratiques de développement.
Stack principale :
AWS : S3, Glue, Athena, EMR, MWAA, ECS, Lambda
Python : Pandas, PySpark, AWS Wrangler
SQL avancé
Apache Spark
Apache Airflow / MWAA
Parquet, Iceberg, Delta Lake
Compétences complémentaires :
Terraform
IAM / Sécurité Cloud
Data Lake / Data Modeling
IA générative et agentique
Candidate profile
6 ans d'expérience minimum en Data Engineering.
Excellente maîtrise de Python et des bonnes pratiques de développement.
Solide expertise de l'écosystème AWS Data.
Très bon niveau en SQL avancé et optimisation des requêtes.
Expérience confirmée en Spark / PySpark sur des volumes importants.
Maîtrise de l'orchestration des pipelines avec Airflow / MWAA.
Bonne connaissance des formats Parquet, Iceberg ou Delta Lake.
Expérience dans l'industrialisation, le monitoring et l'optimisation des traitements.
Autonomie, rigueur et forte appétence technique.
Working environment
Vous intégrerez une équipe Data évoluant dans un environnement Cloud AWS moderne, avec des problématiques de traitement de données à grande échelle. Vous collaborerez avec des Data Engineers, Data Scientists et équipes métiers pour concevoir des solutions fiables, performantes et industrialisées. L'environnement favorise l'autonomie, l'innovation technique, les bonnes pratiques de développement et l'amélioration continue.
Discover CHOURAK CONSULTING
Apply to this job!
Find your next career move from +10,000 jobs!
Manage your visibility
Salary, remote work... Define all the criteria that are important to you.
Get discovered
Recruiters come directly to look for their future hires in our CV library.
Join a community
Connect with like-minded tech and IT professionals on a daily basis through our forum.
Data Engineer Senior – AWS / Python / PySpark / Airflow
CHOURAK CONSULTING