Mission freelance Data Engineer AWS / GenAI

Dans le cadre du plan de transformation DATA de notre Client, notre client développe des applications et plateformes DATA pour rendre nos métiers (pilotage, marketing, commerce, etc.) autonomes dans l’analyse de leurs données et KPI.

Les infrastructures et projets incluent :

• AWS, GitLab, Terraform, DBT, Snowflake, Python, Scala, Spark, PowerBI, AI/GenAI

• Architectures Big Data sophistiquées pour ingérer plus de 100 par jour (Datalake, Event-Driven, Streaming, etc.)

Exemples de projets :

• Chatbot AI

• Socle vidéo, navigation et calcul des audiences

• Recommandation de programmes via IA

• Feature Store et modernisation des flux financiers

• Plateformes CRM et partage de données partenaires

• Kubernetes et applications de data self-service

En tant que Data Engineer, vous serez en charge de :

• Concevoir, développer et maintenir des pipelines de données scalables et performants (ingestion, traitement et stockage de données massives).

• Développer des architectures Big Data sur AWS (S3, EMR, Lambda, Kinesis, Batch…), Snowflake et Spark.

• Développer en Scala et Python pour le traitement massif des données.

• Automatiser les workflows et orchestrer les pipelines avec Airflow et DBT.

• Concevoir et exposer des APIs customer-facing performantes.

• Optimiser les performances et garantir la scalabilité pour gérer un volume important d’utilisateurs.

• Collaborer avec les équipes Data Science, Produit et DevOps pour une intégration fluide.