
Job position Data Engineer Scala/Spark – AWS Cloud
Share this job
Nous recherchons un Data Engainer Scala/Spark pour rejoindre une équipe Data/IT Agile au sein d’un grand compte du secteur financier.
L’application sur laquelle vous interviendrez est une solution batch critique permettant le traitement de Data à travers des calculs d’indicateurs et la restitution via un front React et des APIs REST.
La solution est cloud native, déployée sur :
AWS pour les imports et l’ETL (S3, Glue, Athéna, Lambda) ;
Azure pour les calculs complexes et le stockage SQL Server.
Au sein de l’équipe projet, vous interviendrez sur :
La prise en main de l’application existante (Scala/Spark, C#)
L’implémentation de nouvelles User Stories, issues de la Roadmap métier
La conception technique de solutions évolutives sur le Cloud
L’implémentation des évolutions fonctionnelles et techniques
La mise en production, le suivi post-release
La rédaction des spécifications et documentation technique
La rédaction et exécution de tests unitaires et d’intégration
Le monitoring de la production (via Splunk)
Le support utilisateurs et l’amélioration continue
Candidate profile
Expertise Scala/Spark (batch, traitement de données volumineuses)
Maîtrise des services AWS : Glue, S3, Athéna (Lambda apprécié)
Expérience en architecture technique (design de solutions cloud hybrides)
Expérience en ETL, traitement de market data, calculs d’indicateurs
Compétences souhaitées :Notions ou pratique en Python
Appétence pour les sujets Data Science / Machine Learning
Pratique des tests, CI/CD, DevOps
Pratique Agile / Scrum
Working environment
L’environnement technique est complexe, stimulant et multi-cloud (AWS & Azure), et fait appel à des volumes de données significatifs, des problématiques de scalabilité, de calcul distribué et d’intégration temps réel / batch.
Agile/Scrum avec rituels bien en place
Orienté DevOps (CI/CD, monitoring Splunk, automatisation des déploiements)
Ouvert aux propositions, avec une vraie écoute des profils techniques.
Apply to this job!
Find your next career move from +1,000 jobs!
-
Manage your visibility
Salary, remote work... Define all the criteria that are important to you.
-
Get discovered
Recruiters come directly to look for their future hires in our CV library.
-
Join a community
Connect with like-minded tech and IT professionals on a daily basis through our forum.
Data Engineer Scala/Spark – AWS Cloud
HIGHTEAM