Mission freelance Data Engineer Scala/Spark.

Client : Entreprise de transport

Poste : Architecte technique Senior DSM

Expérience : Plus de 8 ans

TJM d’achat max : 515€

Localisation : Banlieue parisienne

Deadline réponse : 09/12

Démarrage : 01/01/2025

Durée : Mission très longue

La prestation, objet du présent cahier des charges, est une prestation à temps plein de Data Engineer Senior Scala/Spark.

Vous interviendrez en tant que contributeur individuel sur l’étude, le chiffrage, la réalisation et l’exploitation de tâches liées à la constitution de traitements Data complexes.

Les projets sont menés en équipe de 2 à 6 Data Engineers, accompagnés d’opérateurs, d’architectes et encadrés par un chef de projet.

Dans le cadre de cette prestation, il est notamment demandé de réaliser les livrables décrits ci-dessous.

S'agissant d'un projet mené en méthodologie agile, le découpage des livrables est réalisé par sprints.

Le contenu de chaque sprint est variable mais toujours constitué sur la base d’US (User Stories).

Les livrables liés aux US sont donc variables mais suivent généralement une recette commune liée à la Definition of Done du projet.

Ces livrables sont réalisés par l'équipe projet, sans responsabilité de production individuelle.

Les sprints s’échelonnent généralement sur 2 semaines.

• Développement des US et tests associés ;


• Documentation du projet, mapping des données, modélisation des pipelines, documents d’exploitation ;


• Mise en place du CI/CD sur l’usine logicielle ;


• Mise en place du monitoring ;