Mission freelance ALSL - Data Engineer (GCP) – Plateforme Data
Paris
Pickmeup
Le poste ALSL - Data Engineer (GCP) – Plateforme Data
Partager cette offre
On cherche un(e) Data Engineer pour renforcer une équipe qui fait tourner la plateforme data au quotidien.
Le sujet est très concret : ramener des données qui viennent de partout, les centraliser proprement, les rendre fiables, et garder une plateforme qui tient la charge (et qui ne casse pas en prod au premier pic).
Vous travaillerez avec un Product Owner, un Data Steward et d’autres data engineers. On est sur une logique : ingestion, standardisation, stockage, et tout ce qui va avec côté run (monitoring, reprise, sécurité, doc).
Vos missions :Collecter et centraliser des sources hétérogènes (API, fichiers, bases, événements).
Construire des pipelines robustes : gestion des erreurs, reprises, backfills, alerting, qualité.
Développer les traitements en Python / SQL / Spark (volumes en hausse, donc on fait attention à la perf et aux coûts).
Orchestrer les flux avec Airflow.
Structurer le stockage sur Cloud Storage avec une approche Delta Lake (évolution de schémas, merge/upsert, partitionnement, rétention).
Industrialiser l’ensemble : Terraform / Terragrunt, GitLab CI/CD, environnements propres (dev/staging/prod).
Contribuer à la gouvernance et à la conformité : catalogage et métadonnées via Dataplex + documentation utile (pas un wiki fantôme).
Python, SQL, Spark
Airflow (orchestration)
GCP : BigQuery, Dataproc, Pub/Sub, Cloud Storage
Delta Lake
Terraform + Terragrunt
GitLab + GitLab CI/CD
Méthodes : Agile (Scrum/Kanban)
Profil recherché
On cherche un(e) Data Engineer qui a déjà fait tourner des pipelines en production.Indispensable :
3 ans mini en Data Engineering, avec du run (prod, incidents, monitoring, stabilité).
Expérience solide sur GCP : BigQuery et, idéalement, Dataproc / PubSub / Cloud Storage.
Airflow en prod (DAGs, retries, backfill, alertes).
Python + SQL solides.
Spark (PySpark) sur de vraies volumétries.
Industrialisation : Terraform et pratique CI/CD (GitLab).
Dataplex (catalog, tags/classification, gouvernance).
Terragrunt (multi-environnements, modules, state).
Delta Lake réellement utilisé (tables Delta, merge/upsert, schema evolution, retention/vacuum).
Environnement de travail
Équipe “plateforme” orientée ingestion/bronze : on traite du concret (sources hétérogènes, schémas qui bougent, volumétrie qui augmente).
Culture prod : incidents, reprise, qualité, observabilité, optimisation perf/coûts — pas uniquement du dev “au calme”.
Déploiements industrialisés : GitLab CI/CD + Terraform/Terragrunt, environnements séparés (dev/staging/prod).
Forte sensibilité sécurité / conformité / gouvernance (catalogage, règles d’accès, traçabilité).
On cherche quelqu’un qui sait prendre un sujet, le cadrer, livrer, et laisser une plateforme propre derrière lui.
Postulez à cette offre !
Trouvez votre prochaine mission parmi +10 000 offres !
-
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
-
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
-
100% gratuit
Aucune commission prélevée sur votre mission freelance.
ALSL - Data Engineer (GCP) – Plateforme Data
Pickmeup
