Partager cette offre
Contexte de la mission
Le consultant travaillera en étroite collaboration avec les équipes de production applicative et DevOps afin de mettre en œuvre les évolutions techniques de la plateforme.
Missions principales
Mettre en œuvre de nouvelles ingestions de données.
Réaliser les traitements de Data Preparation / transformation.
Développer, maintenir et faire évoluer les pipelines de données en PySpark.
Réaliser du Shell Scripting sous Unix/Linux.
Collaborer avec l'équipe DevOps pour les demandes d'évolution de la plateforme.
Participer au maintien en conditions opérationnelles et à l'évolution des traitements Data.
Rédiger les spécifications techniques et documenter les solutions mises en œuvre.
Compétences indispensables
Très bonne maîtrise attendue :
Hadoop
Python / PySpark
Hive
SQL
Shell Scripting Unix/Linux
Environnement/outils :
Git
Jenkins
Jira
Méthodologie Agile / Scrum
Anglais professionnel indispensable, à l'écrit comme à l'oral,
Compétences appréciées / différenciantes
Une expérience sur les technologies suivantes constituera un plus :
Indexima – Alteryx – Altair – GCP – BigQuery – bibliothèques Python orientées API.
Profil recherché
Profil recherché
Data Engineer disposant idéalement de 3 à 6 ans d'expérience, très opérationnel sur l'écosystème Hadoop / PySpark, avec une véritable appétence pour le développement et le traitement de volumes importants de données.
Le consultant devra être autonome, dynamique, force de proposition et techniquement curieux, avec une forte capacité d'analyse et de résolution de problèmes. Un excellent relationnel et une bonne capacité à travailler en équipe dans un environnement international sont également attendus.
Environnement de travail
Le consultant travaillera en étroite collaboration avec les équipes de production applicative et DevOps afin de mettre en œuvre les évolutions techniques de la plateforme.
Missions principales
Mettre en œuvre de nouvelles ingestions de données.
Réaliser les traitements de Data Preparation / transformation.
Développer, maintenir et faire évoluer les pipelines de données en PySpark.
Réaliser du Shell Scripting sous Unix/Linux.
Postulez à cette offre !
Trouvez votre prochaine mission parmi +8 000 offres !
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
100% gratuit
Aucune commission prélevée sur votre mission freelance.
Data Engineer Hadoop / PySpark
KEONI CONSULTING