Le poste Data Engineer Spark/Scala
Partager cette offre
Nous recherchons un Data Engineer Spark/Scala
Objectif global : Développement sur le Hub Risque avec les technos Spark/Scala.Les livrables sont:
Programmes développés
Dossier de conception technique
Dossier de tests unitaires
Compétences techniques:
Spark Scala - Confirmé - Impératif
Big Data - Confirmé - Impératif
Description détaillée:
Afin de renforcer l'équipe de développement, on recherche un Data Engineer expérimenté et connaissant les technos suivantes :
Solutions utilisées :
- Socle Big Data (OI1) :
o Compute : Yarn
o Storage: HDFS (avec chiffrement pour C3), Hive
o Sécurité des données: Ranger, Ranger KMS, Ldap, Kerberos
Frameworks/langage/outils utilisés :
- MoveNAStoHDFS
- Moteur d'ingestion v2
- Spark Scala
- Dictionnaire de données
- Socle Data Science :
o DataiKu Automation
Frameworks/langage/outils utilisés:
- Spark 3
- HQL
Prestation sur Bordeaux. 2 à 3 jours de présence sur site requise.
Postulez à cette offre !
Trouvez votre prochaine mission parmi +8 000 offres !
-
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
-
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
-
100% gratuit
Aucune commission prélevée sur votre mission freelance.
Data Engineer Spark/Scala
CS Group Solutions
