
Share this job
Je cherche pour un de mes client un Expert migration et production Cloudera / Databricks
Nombre de poste : 1
Expérience : 7 ans minimum
Localisation : Paris
Nombre de jours de Télétravail : 2
Démarrage : Asap
Durée mission : 1 an minimum
Contexte :
Le projet Data Lake était initialement porté par la Branche Grand Public et Numérique (BGPN) .
Dans le cadre de l’évolution de sa plateforme Data vers Azure (projet Data Cloud) l’équipe Data Cloud et IA Factory (DIAF) arrive à une étape clé de ce projet structurant pour l’ensemble :
• Mise en production et ouverture aux utilisateur de la version 1.0 de Data Cloud (Azure Darabricks)
• Stabilisation d’ODLG (Cloudera)
• Migration progressive d’ODLG vers la nouvelle plateforme Data Cloud
• Accompagnement des branches sur la décroissance et l’optimisation des consommations Azure
• Rapprochement vers une gouvernance i-TEAM
• Intégration dans les processus de supervision et de support i-TEAM
• Réflexion sur la mise en œuvre d’un nouveau Catalogue de Services
• Accompagnement et soutien de l’équipe dans cette transformation
La mission consiste à intégrer l’équipe DIAF sur un rôle transverse pour apporter un support dans les processus de stabilisation et de migration. Ce rôle nécessite donc aussi bien une connaissance technique qu’une compréhension des modèles de données et des processus de migration.
La prestation inclue :
• Analyse des résultats l’audit Cloudera et accompagnement de l’équipe dans le suivi du plan de remédiation
• Renfort des actions liées à AIG
• Soutien aux équipes socle Data Cloud et ODLG
• Soutien aux équipes Outils & Usages
• Analyse et optimisation des ressources sur Cloudera et Data Cloud
• Accompagnement des plans de migrations et optimisation
1. Gestion des obsolescences
Le prestataire devra s’assurer de la maintenabilité des versions liées au support des éditeurs ou de l'image middleware PaaS/IaaS proposée :
Gestion de l'obsolescence des socles et images ()
2. Livrables / Résultats attendus
• Suivi évaluation et CR des activités liées à l’audit Cloudera
• Analyse et plan de mitigation des "requêtes lourdes" Cloudera
• Proposition d’optimisations des séquences des job avec plan de mise en œuvre et suivi des actions
• Suivi et reporting décroissance et décommissionnement ODLG
• Bonnes pratiques de migration on-remise -> cloud
3. Cadre technique de la prestation : environnements techniques, outils et niveaux de maîtrise souhaités.
Niveaux de compétences attendus :
0 : pas de connaissance
1 : connaissance de base
2 : pratique quotidienne
3 : expertise avérée.
Jira 3
Cloudera 3
Azure 3
Databricks 3
Redhat 3
GitLab 3
Terraform 3
Pyhton 3
Dremio 3
4. Cadre fonctionnel de la prestation
La réalisation des prestations requiert les compétences approfondies dans les domaines fonctionnels ci-dessous.
Data model 3
Data Management 3
Data Viz 2
Sys admin 3
Data migration 3
Candidate profile
Expert Cloudera / Hadoop / Big Data
Solide expérience Azure Databricks & Spark
Expérience confirmée en migration Data Lake vers Cloud
Maîtrise Python, Terraform, GitLab, Linux RedHat
Bonne connaissance Data Management, Data Modeling et Data Platform
Capacité à travailler en transverse avec des équipes techniques et métiers
Working environment
Notre client est un acteur majeur engagé dans une transformation digitale et Data d’envergure. Il développe une nouvelle génération de plateformes Data Cloud afin d’améliorer la valorisation des données, moderniser ses architectures et accompagner les métiers dans leurs usages analytiques.
Dans le cadre de cette transformation stratégique, les équipes Data travaillent sur la migration progressive des plateformes historiques Big Data vers un environnement Cloud Azure Databricks, avec des enjeux forts de performance, industrialisation, gouvernance et optimisation des coûts.
Apply to this job!
Find your next career move from +9,000 jobs!
Manage your visibility
Salary, remote work... Define all the criteria that are important to you.
Get discovered
Recruiters come directly to look for their future hires in our CV library.
Join a community
Connect with like-minded tech and IT professionals on a daily basis through our forum.
Expert migration et production Cloudera / Databricks sue Paris
EterniTech
