Le poste Ingénieur Data Singlestore
Partager cette offre
Nous sommes à la recherche d'un Ingénieur Data passionné et fortement motivé, démontrant un vif intérêt pour les technologies de pointe, en particulier Singlestore. Si le consultant est animé par la volonté de relever des défis stimulants et de contribuer activement à l'innovation dans le domaine des bases de données distribuées, cette opportunité est faite pour lui !
• Mettre en place la collecte et la mise à disposition des données au sein de l’entreprise
• Industrialiser et mettre en production des traitements sur les données (par exemple : mise à disposition de tableaux de bords, intégration de modèles statistiques) en lien avec les équipes métiers et les équipes qui les analysent
Activités et tâches :
• Acheminement de la donnée
• Mise à disposition de la donnée aux équipes utilisatrices
• Mise en production de modèles statistiques
• Suivi de projet de développement
• Développement job spark
• Traitement et ingestion de plusieurs formats des données
• Développement des scripts
• Développement et Implémentation des collectes de données, des jobs de traitement et Mapping de données
• Développement des moyens de restitution via génération de fichier et ou API & Dashboarding
• Collecter toutes les données et les fournir aux clients en tant qu'API ou fichiers
• Développer de pipelines d'ingestion à partir de différentes sources (streaming et batch) ainsi que des spark jobs le prétraitement des données et calcul des indicateurs de performance (KPI)
• Développer des API génériques d’ingestion et de traitement de données dans un environnement HDP
• Participer à la conception, mise en place et administration de solutions Big Data
• Participation à l’installation, administration et configuration des Hadoop clusters. Mise en place en Spring Boot des services d'extraction de data du système legacy (tera data), la data sera par la suite envoyée au data lake via des topics Kafka
• Normalisation et agrégation des données afin de produire les rapports sous forme de Business View
Profil recherché
Expertises spécifiques :
• Expertise Singlestore : Mettez en œuvre des solutions de données robustes et performantes en utilisant Singlestore pour répondre aux besoins d'intégration et de traitement des données.
• Pipeline de Données : Concevez et implémentez des pipelines de données efficaces en utilisant les technologies les plus récentes, en mettant l'accent sur l'intégration des données provenant de différentes sources.
• Transformations Avancées : Utilisez votre expertise pour développer des fonctions avancées en SQL, DBT, Python, Rust pour transformer et manipuler les données de manière innovante.
• Optimisation des Performances : Appliquez votre passion pour optimiser les performances des bases de données distribuées, en relevant les défis complexes liés à cette technologie.
• Intégration PowerBI et Tableaux de Bord : Contribuez à l'intégration transparente avec PowerBI en créant des cubes et des tableaux de bord personnalisés.
• Partage de Connaissances : Documentez rigoureusement le code développé et fournissez une formation pour favoriser une culture de collaboration et d'excellence technique.
Exigences :
• Forte expérience dans l'intégration des données structurées et non structurées.
• Expertise avérée dans les bases de données distribuées, en particulier avec Singlestore.
• Compétences avancées en gestion de pipelines et modélisation des données.
• Capacité à développer des fonctions personnalisées pour répondre à des besoins spécifiques.
• Solides compétences en optimisation des performances des bases de données.
• Expérience appréciée dans l'intégration de PowerBI et la création de tableaux de bord.
Environnement de travail
Banque située à Paris 13.
Postulez à cette offre !
Trouvez votre prochaine mission parmi +15 000 offres !
-
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
-
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
-
100% gratuit
Aucune commission prélevée sur votre mission freelance.
Ingénieur Data Singlestore
CELAD
