Partager cette offre
Dans le cadre de projets à forte volumétrie autour des domaines Risque, Finance et Reporting réglementaire, chez l'un de nos clients grands comptes, nous recherchons un Big Data Engineer confirmé pour intervenir sur la conception, le développement et l’industrialisation de traitements de données à grande échelle.
Vous aurez pour mission missions
- La conception et le développement de pipelines de données batch.
- L’alimentation de datamarts réglementaires Risque et Finance.
- L’alimentation des systèmes de reporting financiers et risques.
- L’intégration de données issues de sources variées : Core Banking, bases relationnelles, fichiers partenaires, systèmes internes, etc.
- La mise en place de contrôles de qualité, cohérence et complétude des données.
- L’optimisation des traitements sur de fortes volumétries : partitionnement, gestion des ressources, performances Spark, optimisation des requêtes.
- L’industrialisation et le déploiement des traitements via CI/CD, orchestration et monitoring.
- La réalisation des tests unitaires et des TNR.
- La documentation technique et la mise à jour des référentiels de données.
- La prise en compte des contraintes de sécurité, confidentialité et conformité réglementaire : RGPD, classification, anonymisation des données.
- La participation aux cérémonies Agile et aux réunions projets.
- La contribution aux activités de Run quotidien et mensuel.
Environnement technique
Scala – Spark – Hadoop – HDFS – Hive – Airflow – SQL avancé – Bases relationnelles – NoSQL – CI/CD – DevOps
Une très bonne maîtrise des problématiques Big Data, volumétrie et optimisation des performances est indispensable.
Profil recherché
De formation supérieure, vous disposez d’une expérience d'au moins 8 ans en développement Big Data Spark, Scala, idéalement dans des environnements à forte volumétrie.
Vous êtes capable de travailler de manière autonome avec les architectes, Tech Leads, équipes de développement et chefs de projets, tout en respectant les normes de développement et les bonnes pratiques définies par l’équipe.
Environnement de travail
WEBNET c’est : 200 collaborateurs (dragonniers) passionnés avec une expertise de plus de 25 ans en architectures web & mobile, comme en témoignent les plus de 2000 projets d’envergure à son actif que ce soit sur : PHP / Symfony, JAVA EE, Microsoft .NET, Angular, React, IONIC...).
Nous avons à cœur de proposer différentes missions à nos collaborateurs (liberté de choix), tout en vous permettant d’évoluer et d’agrandir votre champ de compétences.
C’est au travers de différents suivis et échanges que nous regardons avec vous votre carrière et votre évolution opérationnelles et techniques.
Nous savons que les technologies évoluent très rapidement, c’est pourquoi, notre catalogue de formation proposent tous les trimestres, 3 formations minimum autour de nos technos phares, dispensées par nos architectes techniques.
Webnet aide également bénévolement des associations éthiques et citoyennes dans le développement de leur transformation digitale (programme de mécénat).
Postulez à cette offre !
Trouvez votre prochain job parmi +8 000 offres !
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
100% gratuit
Aucune commission prélevée sur votre mission freelance.
Data Engineer Scala/Apark H/F - Boulogne
Webnet