Find your next tech and IT Job or contract PySpark

Acteur majeur dans le domaine IT, depuis notre création en 1993, nous n'avons cessé de croître et d'évoluer. Avec une équipe dévouée de près de 1.400 collaborateurs répartis sur plusieurs sites en Belgique, au Luxembourg, en France et au Canada, NSI a suivi une trajectoire exceptionnelle. Notre entreprise est à la pointe de la révolution numérique, offrant une gamme complète de services IT, de l'analyse au développement de logiciels, en passant par l'architecture et la gouvernance IT. Votre rôle au sein de NSI Nous recherchons un(e) Consultant(e) Data Analyst – Big Data H/F afin d'intervenir au sein d'un grand acteur du secteur des télécoms, sur le pilotage de la qualité de service de son réseau fixe. Descriptif des missions Au sein d'une cellule dédiée à la qualité de service, vous produisez des analyses à partir de datasets que vous constituez sur les données issues des plateformes Big Data du client. Vous avez également la responsabilité de rendre disponibles les données une fois celles-ci nettoyées, préparées et formatées, sous forme de datasets ou de tables mis à disposition des Data Scientists de l'équipe. Vous développez enfin des tableaux de bord de suivi des KPI. Missions Constituer des datasets à partir des données des plateformes Big Data Nettoyer, préparer et formater les données Mettre à disposition des Data Scientists des datasets et des tables exploitables Développer des tableaux de bord de suivi des KPI Produire des analyses commentées

Notre client, grand groupe international du secteur de l'assurance, engage une transformation majeure de sa plateforme Data & IA. Dans le cadre de ce programme, la Data Factory recherche un Senior Staff Data Platform Architect pour définir la trajectoire technologique de la plateforme et piloter les transformations structurantes. Le périmètre technique s'appuie sur Azure et Databricks. Les chantiers prioritaires sont : ● Migration vers Unity Catalog : architecture cible, stratégie de migration, gouvernance des Data Products, masking de la donnée, sécurité ● Move to Global Azure Tenant : migration depuis un tenant legacy (ARM) vers le tenant groupe, avec industrialisation IaC via Terraform ● Data Observability, FinOps, MLOps, Agentic AI : sujets d'innovation et de gouvernance associés à la roadmap plateforme Le poste n'est pas un rôle de management hiérarchique. Le leadership attendu est technique, transverse et d'influence : Design Authority, revues d'architecture, animation de communautés, alignement avec les architectes entreprise, solutions, cloud et sécurité. A. Stratégie & architecture plateforme ● Définir la trajectoire de la plateforme sur 3 à 5 ans : Lakehouse, Data Products, Data Mesh, MLOps, GenAI, Agentic AI, Data Observability, FinOps ● Produire les livrables stratégiques : roadmaps, schémas directeurs, standards d'architecture, patterns de référence B. Programme Unity Catalog ● Définir l'architecture cible : stratégie de migration, modèle de gouvernance, modèle de sécurité, stratégie Data Product ● Piloter la migration progressive, la coexistence Legacy / Unity et la migration factory C. Modernisation & Global Azure Tenant ● Piloter la stratégie de migration Azure Global Tenant : impacts techniques, trajectoire, standards Terraform / IaC ● Industrialiser les frameworks internes et contribuer à l'évolution des Data Products D. Innovation & veille technologique ● Identifier les technologies émergentes : Databricks roadmap, Microsoft Fabric, GenAI, AI Agents, Lakeflow, Delta Sharing ● Piloter les études, POC et expérimentations E. Gouvernance technique & FinOps ● Définir les standards architecture, développement, exploitation et sécurité ● Animer les Design Authority et revues d'architecture ● Définir la stratégie FinOps : optimisation coûts Azure, optimisation Databricks, capacity planning

Nous recherchons un Expert Technique Senior pour participer à un projet stratégique de refonte de notre Data Lake. Ce projet vise à répondre de manière flexible et agile aux besoins métiers, et apporter une valeur ajoutée autour de la donnée. Missions principales : Participer au développement du Framework de gestion des flux de données Contribuer à la conception et l'architecture technique de la solution cible Proposer des solutions innovantes Être force de proposition sur le design des solutions techniques Rédiger les dossiers techniques et autres documentations nécessaires Assurer la cohérence technique des différents modules du projet Réaliser et automatiser les tests sur les outils/modules développés Veiller au respect des délais Accompagner la phase de validation business en UAT et PROD Préparer le roadbook de migration et participer à la mise en production

Dans le cadre du renforcement d'une équipe Data, nous recherchons un(e) Data Engineer pour intervenir sur une plateforme Data à fort volume, au sein d'un environnement international et orienté produit. Vous rejoindrez une équipe technique en charge de construire, industrialiser et faire évoluer des solutions permettant de collecter, transformer, fiabiliser et exposer la donnée à destination des équipes Data et métiers. L'environnement repose sur une Modern Data Stack, avec une architecture de type Lakehouse, et de forts enjeux autour de la scalabilité, de l'automatisation et de la qualité des données. Vos missionsConcevoir, développer et maintenir des pipelines de données robustes et scalables. Collecter, transformer et mettre à disposition des données provenant de différentes sources. Développer des traitements en Python / PySpark / SQL. Orchestrer les pipelines de données et les workflows avec Airflow. Participer à la modélisation et à la structuration des données. Développer et maintenir les transformations avec dbt. Mettre en place des contrôles permettant de garantir la qualité et la fiabilité des données. Optimiser les performances et les coûts des traitements. Participer à l'amélioration continue de la plateforme Data. Contribuer aux sujets de Data Governance, Data Lineage et Data Contracts. Appliquer les bonnes pratiques de Software Engineering : Git, GitHub, CI/CD, tests et documentation. Travailler en étroite collaboration avec les Data Engineers, Analytics Engineers, Data Analysts et Data Scientists. Environnement techniqueCloud : AWS / GCP Data Platform : Databricks, S3 Processing : Spark / PySpark Langages : Python, SQL, idéalement Scala Orchestration : Airflow Transformation : dbt Data Quality : Great Expectations Versioning / Delivery : Git, GitHub, CI/CD Data : Lakehouse, Data Lineage, Data Governance, Data Contracts Méthodologies : Agile / Scrum / Kanban

RésuméLe projet a pour objectif la création et l'évolution d'un produit de données à destination des actuaires, qui utiliseront ces données pour l'entraînement de leurs modèles (tarifaires par exemple). Le candidat rejoindra une équipe de 4 data engineers (dont un lead) pour participer à la mise en place de ce produit de données. Responsabilités :Proposer et valider des solutions techniques Mettre en œuvre des solutions performantes dans un cadre Agile Participer aux activités opérationnelles courantes Must Haves :Expérience avec Cloud Azure (Data Factory, ADLS, Databricks) Compétences obligatoires en PySpark et Python Bonnes connaissances des architectures de données Compétences en SQL Nice to Haves :Connaissance de Scala Expérience sur les processus DevOps et CI/CD Autres Détails :Localisation : Hauts-de-Seine (92) Télétravail : 3 jours