Le poste Data Engineer Scala/Spark – AWS Cloud
Partager cette offre
Nous recherchons un Data Engainer Scala/Spark pour rejoindre une équipe Data/IT Agile au sein d’un grand compte du secteur financier.
L’application sur laquelle vous interviendrez est une solution batch critique permettant le traitement de Data à travers des calculs d’indicateurs et la restitution via un front React et des APIs REST.
La solution est cloud native, déployée sur :
AWS pour les imports et l’ETL (S3, Glue, Athéna, Lambda) ;
Azure pour les calculs complexes et le stockage SQL Server.
Au sein de l’équipe projet, vous interviendrez sur :
La prise en main de l’application existante (Scala/Spark, C#)
L’implémentation de nouvelles User Stories, issues de la Roadmap métier
La conception technique de solutions évolutives sur le Cloud
L’implémentation des évolutions fonctionnelles et techniques
La mise en production, le suivi post-release
La rédaction des spécifications et documentation technique
La rédaction et exécution de tests unitaires et d’intégration
Le monitoring de la production (via Splunk)
Le support utilisateurs et l’amélioration continue
Profil recherché
Expertise Scala/Spark (batch, traitement de données volumineuses)
Maîtrise des services AWS : Glue, S3, Athéna (Lambda apprécié)
Expérience en architecture technique (design de solutions cloud hybrides)
Expérience en ETL, traitement de market data, calculs d’indicateurs
Compétences souhaitées :Notions ou pratique en Python
Appétence pour les sujets Data Science / Machine Learning
Pratique des tests, CI/CD, DevOps
Pratique Agile / Scrum
Environnement de travail
L’environnement technique est complexe, stimulant et multi-cloud (AWS & Azure), et fait appel à des volumes de données significatifs, des problématiques de scalabilité, de calcul distribué et d’intégration temps réel / batch.
Agile/Scrum avec rituels bien en place
Orienté DevOps (CI/CD, monitoring Splunk, automatisation des déploiements)
Ouvert aux propositions, avec une vraie écoute des profils techniques.
Postulez à cette offre !
Trouvez votre prochaine mission parmi +7 000 offres !
-
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
-
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
-
100% gratuit
Aucune commission prélevée sur votre mission freelance.
Data Engineer Scala/Spark – AWS Cloud
HIGHTEAM
