Trouvez votre prochaine offre d’emploi ou de mission freelance Hadoop

🧾 Lead Data Engineer GCP – Migration Hadoop → GCP🎯 Contexte Dans le cadre de la modernisation de la plateforme Data , le client engage une migration d’un environnement Hadoop on-premise vers GCP . L’équipe existante (≈6 ingénieurs GCP) nécessite un référent technique senior pour structurer et sécuriser la migration. 🧩 Rôle👉 Référent technique de la migration Data Définir la stratégie de migration Hadoop → GCP Analyser les workloads existants (Hive, Spark, batch/stream) Orienter les choix techniques (BigQuery, Dataflow, Dataproc, GCS) 👉 Leadership technique Encadrer et accompagner les ingénieurs GCP Challenger les choix d’implémentation Mettre en place les bonnes pratiques (data engineering, CI/CD, infra as code) 👉 Contribution opérationnelle Participer à la migration des pipelines (Spark → GCP) Optimiser performance et coûts Industrialiser les flux data 🧠 Profil recherchéCompétences clés Expertise GCP Data (BigQuery, Dataflow, GCS…) Solide expérience Hadoop / Big Data Maîtrise Data Engineering (Spark, SQL, Python) Bon niveau en architecture data & cloud Expérience Migration Hadoop → Cloud (idéalement GCP) Rôle de lead technique / référent Contexte grands comptes / environnements complexes ✅ Livrables Stratégie de migration Architecture cible data Standards & bonnes pratiques Contribution aux pipelines migrés ⚠️ Enjeux clés Performance & coûts (FinOps) Qualité & gouvernance de la donnée Coexistence temporaire Hadoop / GCP 🏷️ Positionnement 👉 Lead Data Engineer GCP (orienté architecture) 👉 Profil hybride : hands-on + vision stratégique

Nous recherchons un(e) Administrateur Expérimenté(e), passionné(e) par la technologie, pour travailler directement chez nos clients, en étant au cœur de leurs défis numériques. Si vous souhaitez participer à des projets d'envergure, continuer à apprendre et évoluer dans votre carrière, c'est l'occasion rêvée ! Vous aurez la charge des missions de Build et Run : RUN : • Administration et maintien en conditions opérationnelles de la plateforme Cloudera CDP • Gestion des clusters Hadoop (HDFS, YARN, Hive, Impala, Spark) via Cloudera Manager • Supervision, performance, gestion des incidents (niveau 3) • Gestion de la haute disponibilité (géo-cluster) et de la sécurité • Exploitation de Dataiku (optionnel) • Orchestration des workloads via Kubernetes BUILD : • Industrialisation des déploiements (automatisation, CI/CD) • Contribution aux évolutions d'architecture du socle Data • Mise en place et optimisation de pipelines data (Spark, Hive, Impala) • Intégration avec les environnements cloud (Azure / hybride) • Contribution au socle IA (Dataiku sur Outscale) Référence de l'offre : 1hnwz9a4s3