Job position Développeur Data – MCO DataLake
Share this job
Une grande entreprise du secteur de l’énergie recherche un(e) Développeur(se) Data confirmé(e) pour assurer le maintien en conditions opérationnelles (MCO) de son DataLake en production.
Le DataLake est alimenté par une quinzaine de sources différentes et repose sur une stack technique moderne basée sur Hadoop (distribution TDP).
Vous rejoindrez une petite équipe autonome (2 devs) fonctionnant en mode agile, en lien avec les équipes DevOps, TDP, exploitation et les métiers.
Candidate profile
Assurer le MCO des applications du DataLake : évolutif, correctif, préventif et adaptatif
Maintenir et faire évoluer les pipelines de traitement et d’intégration de données
Garantir la qualité du code et la documentation associée
Suivre les activités dans Jira (tickets, tâches, incidents)
Excellente maîtrise de Python pour le développement de traitements de données
Expertise en Apache Spark pour le traitement distribué
Très bonne connaissance de Hive pour les requêtes et la structuration de données
Maîtrise complète de Hadoop (idéalement distribution TDP)
Solide expérience avec Git pour la gestion de version
Compétences avancées en Ansible pour l’automatisation et l’industrialisation
Bonne pratique de Docker pour la conteneurisation des environnements
Compétences confirmées en Java pour certains modules existants
Working environment
Code maintenu et documenté
Documentation technique
Suivi des activités opérationnelles (Jira)
Apply to this job!
Find your next career move from +1,000 jobs!
-
Manage your visibility
Salary, remote work... Define all the criteria that are important to you.
-
Get discovered
Recruiters come directly to look for their future hires in our CV library.
-
Join a community
Connect with like-minded tech and IT professionals on a daily basis through our forum.
Développeur Data – MCO DataLake
AGH CONSULTING