Mission freelance INGENIEUR DATA SPARK SCALA F/H

Genious Systèmes recherche pour un de ses clients un Ingénieur Data Spark Scala F/H

Contexte Mission:

Sur une architecture Big Data permettant de collecter les données de l’ensemble des Back Office dans un Datalake (cluster Hadoop), le projet consiste à exploiter ces données pour alimenter un Dataware communautaire stockée sur une base Exadata.

Cette exploitation est réalisée par la conception de nouveaux traitements Spark/Scala manipulant les données raffinées du DataLake avec des règles métiers décisionnelles.

Au sein de l'équipe projet Business Intelligence & Big Data, l'expert SPARK/SCALA aura les activités suivantes :

• Conception détaillée, fonctionnelle et technique.

• Développements SPARK / SCALA

• Contribution à la formalisation des plans de tests, exécution des tests unitaires et d'un premier niveau de tests d'intégration.

• Résolution des anomalies pendant les phases d’intégration fonctionnelle et de recette utilisateur.

• Packaging et déploiement en pre-production et production.

• Optimisation des traitements afin de garantir la qualité de service standards du DWG.

• Mise en œuvre des solutions industrielles et de réentrance permettant une reprise optimum des traitements en cas d’incident en production.

• Mise en service et accompagnement au déploiement.

• Suivi des environnements.

Le consultant devra travailler en étroite collaboration avec le Chef de Projet, responsable du lot et l'équipe de développement du Programme.