Mission freelance Data Ingénieur Senior

Contexte de la mission

La Direction du Numérique dispose d'une Direction Data dont l'objectif est de faire de la donnée un levier de croissance des offres numériques.

Ses activités couvrent la maximisation de la collecte de données dans le respect des réglementations en vigueur, le développement de la connaissance et de l'expérience utilisateur, ainsi que la mise à disposition d'outils de pilotage et d'aide à la décision.

La prestation s'inscrit au sein de l'équipe Bronze, composée d'un Product Owner, d'un Data Steward et de deux Data Ingénieurs.

La stack technique repose sur Python, Spark, SQL, Airflow, Delta Lake, Cloud Storage, et les services GCP (BigQuery, Dataproc, PubSub). L'infrastructure est gérée via Terraform et Terragrunt.

Rôle et responsabilités principales

• Construire et maintenir des pipelines data robustes et scalables

• Participer aux phases de conception, planification et réalisation des tâches en équipe

• Organiser et structurer le stockage des données

• Mettre en place et maintenir les infrastructures scalables adaptées à la croissance des volumes

• Construire et maintenir les workflows CI/CD (GitLab CI/CD)

• Assurer la conformité, la sécurité et la stabilité des environnements

• Partager les bonnes pratiques au sein de l'équipe et participer aux instances des Data Ingénieurs

• Contribuer à la mise à jour de la documentation et assurer une veille technologique active

Livrables attendus

• Pipelines data opérationnels et maintenus

• Infrastructure scalable mise en place et documentée

• Workflows CI/CD fonctionnels

• Documentation technique à jour

• Collecte et centralisation des sources de données non homogènes

• Contribution aux initiatives de gouvernance des données