Find your next tech and IT Job or contract Data Lake

Le Data Engineer supervise et intègre des données de natures diverses provenant de sources multiples ; il vérifie la qualité des données entrant dans le Data Lake, en effectuant notamment des tests, la déduplication et les activités d'assurance qualité associées. Les principales responsabilités incluent : Qualification et gestion des données : - Collecte de données structurées et non structurées produites par différentes applications ou provenant de sources externes à l'entité - Intégration des éléments - Structuration des données (sémantique, etc.) - Cartographie des éléments disponibles - Nettoyage des données (élimination des doublons, etc.) - Validation des données - Création éventuelle du référentiel de données La plateforme de données permet à tous les domaines producteurs de données de mettre à disposition des données brutes ou retravaillées dans un Data Lake. Cette plateforme gère notamment les fonctionnalités et les données relevant du périmètre métier « Relation Réseau ». Elle permet : - L'intégration et l'assurance qualité des données brutes reçues des distributeurs - La mise à disposition de données GRD exploitables pour tous les besoins du segment et de l'organisation (qu'il s'agisse de besoins opérationnels ou analytiques issus de tous les domaines métiers) Principales missions : - Maîtrise des outils Databricks (création de jobs, clusters, notebooks) et capacité à effectuer des requêtes SQL efficaces - Maintien en conditions opérationnelles de la plateforme de production (analyse et correction d'incidents et d'anomalies) - Développement de jobs d'ingestion et de transformation de données en Python avec Spark pour traiter de grands volumes de données - Apport d'une vision à long terme, tant sur le plan opérationnel que stratégique pour la plateforme de données - Soutien et promotion des meilleures pratiques - Participation aux ateliers de conception technique et fonctionnelle - Rédaction et mise à jour de la documentation technique

📋 RÉSUMÉ En tant que Consultant Data Platform, vous accompagnerez nos clients dans la conception, l'implémentation et l'optimisation de leurs architectures et solutions de plateforme de données. Vous interviendrez sur l'ensemble du cycle de vie des projets data, de la stratégie à la mise en œuvre opérationnelle. 🎯 MISSIONS Analyser les besoins métiers et techniques des clients pour définir des architectures de plateforme de données adaptées. Concevoir et implémenter des solutions de stockage, traitement et analyse de données (Data Lake, Data Warehouse, Data Mesh). Migrer des infrastructures de données existantes vers des environnements cloud (AWS, Azure, GCP). Optimiser les performances des plateformes de données et des pipelines ETL/ELT. Rédiger la documentation technique et fonctionnelle des solutions mises en œuvre. Assurer le support technique et la formation des équipes clientes. 📦 LIVRABLES Architectures de plateforme de données validées. Solutions de stockage et traitement de données implémentées et fonctionnelles. Pipelines de données (ETL/ELT) opérationnels. Documentation technique et manuels d'utilisation. Rapports d'optimisation et de performance.

Contexte de la mission: Dans le cadre du développement de nos activités data et de la montée en puissance de nos plateformes analytiques, nous recherchons un Data Engineer pour concevoir, construire et optimiser les pipelines de données alimentant nos applications métiers, nos plateformes analytiques et nos modèles d'intelligence artificielle.Vous rejoindrez une équipe Data pluridisciplinaire (Data Engineers, Data Scientists, Data Analysts, Architectes) et interviendrez sur toute la chaîne de traitement de la donnée : ingestion, transformation, structuration, optimisation, industrialisation et monitoring. Vos responsabilités: Vous serez en charge de: - Concevoir, développer et maintenir des pipelines de données robustes (batch & streaming) - Industrialiser la collecte, la transformation et la mise à disposition des données (ETL/ELT) - Assurer la qualité, la fiabilité et la disponibilité des datasets critiques - Participer à la modélisation et à la structuration des données (Data Lake, Data Warehouse) - Collaborer avec Data Scientists & Analysts pour fournir des données fiables et exploitables - Contribuer aux choix techniques et à l'évolution de l'architecture data - Documenter les pipelines, les schémas et les bonnes pratiques d'exploitation

Je suis à la recherche pour un de nos clients d'un Consultant Accompagne ment au changement projets DATA. Facilier l'adoption des usages Data, des outils et nouvelles pratiques . Accompagnement des équipes Data techniques et fonctionnelles et des équipes métiers. Défintion de la stratégie de formation, communication et d'accompagnement des utilisateurs Stratégie de conduite du changement - Plan de communication - Plan de formation / acculturation data - Supports de formation - Analyse d’impact organisationnel - Indicateurs d’adoption et de transformation Conduite du changement Stratégie de communication, formation et accompagnement au changement Accompagnement des métiers Connaissance des architectures Data (Data Lake, Data Warehouse). Bonne connaissance des outils ETL et des solutions BI. Compréhension des concepts Big Data et Cloud (Azure, AWS, GCP). Notions en Data Quality et Data Governance. Outils data et BI (Plateforme Data, Power BI, Tableau) Notions d'outils de Data Management

Bonjour à tous ! Dans le cadre d'un projet stratégique, nous recherchons un Data Engineer expérimenté disposant d'une solide expertise Azure Databricks. Missions Développement et optimisation de pipelines de données Big Data Traitement et transformation de données volumineuses avec PySpark Conception et évolution d'une architecture Lakehouse Manipulation de données complexes (JSON imbriqués) Industrialisation des traitements et amélioration des performances Participation aux évolutions de la plateforme Data Collaboration avec les équipes métiers et techniques Environnement technique Azure Azure Databricks PySpark / Spark Python SQL Delta Lake JSON Git / GitLab / GitHub Azure Data Factory (plus) Profil recherché Minimum 5 ans d'expérience en Data Engineering / Big Data Forte expérience Databricks et PySpark Maîtrise des environnements Azure Autonomie sur le développement et l'industrialisation de traitements Data Expérience des architectures Data Lake / Lakehouse Compétences appréciées Power BI Azure Synapse Analytics 📍 Localisation : Île-de-France 🏠 Télétravail : hybride 📅 Démarrage : ASAP

Dans le cadre de la réalisation d'un projet en assistance technique, nous recherchons un(e) Technical Product Lead spécialisé(e) en IA Générative pour l'un de nos clients. Vous interviendrez sur le site client situé dans la métropole lilloise (59), avec 2 jours de télétravail par semaine. À ce titre, vos missions quotidiennes seront les suivantes : - Définir la vision produit et la roadmap d'une plateforme d'IA Générative destinée à plus de 100 000 collaborateurs, en pilotant une équipe Agile (développeurs, Data, DataOps) et en arbitrant entre besoins métiers et faisabilité technique ; - Concevoir et développer des solutions GenAI (LLM, RAG, Agents IA) et réaliser des prototypes (POC) en Python sur Google Cloud Platform, en s'appuyant sur Vertex AI et des architectures Cloud/Serverless (Cloud Run, Cloud Functions) ; - Intégrer les APIs et outils SaaS (Workday, Data Lake, etc.) pour automatiser les tâches RH, centraliser la connaissance et déployer des assistants conversationnels intelligents ; - Garantir la qualité, la sécurité et la conformité des solutions livrées, en assurant les choix techniques et d'architecture tout au long du cycle produit.

Dans le cadre de notre croissance et de nos projets de transformation digitale, nous recherchons un(e) Senior Data Engineer pour accompagner nos clients dans la conception, le développement et l'industrialisation de plateformes Data modernes. Vous interviendrez sur des projets stratégiques autour des architectures Data Cloud, des plateformes Big Data, des traitements temps réel et de la valorisation des données, dans des environnements techniques exigeants et à forte volumétrie. En collaboration avec les Architectes Data, Data Scientists, Business Analysts, DevOps et équipes métiers, vous participerez à la conception de solutions robustes, évolutives et sécurisées répondant aux enjeux de performance et de gouvernance des données. Vos missions En tant que Senior Data Engineer, vous serez amené(e) à : Concevoir et développer des architectures Data évolutives et performantes. Développer, maintenir et optimiser des pipelines de données (ETL / ELT) en mode batch et streaming. Concevoir et exploiter des plateformes Data Lake, Data Warehouse et Lakehouse. Mettre en œuvre des solutions d'ingestion de données issues de multiples sources (API, bases de données, fichiers, IoT, événements temps réel). Développer des traitements distribués pour de forts volumes de données. Industrialiser les traitements Data grâce aux pratiques DevOps et DataOps. Concevoir les chaînes CI/CD des plateformes Data. Garantir la qualité, la traçabilité, la sécurité et la gouvernance des données. Optimiser les performances des traitements et les coûts d'exploitation des infrastructures Cloud (FinOps). Participer à la définition des architectures techniques et aux choix technologiques. Assurer le monitoring, l'observabilité et le support des plateformes Data. Produire la documentation technique et accompagner les équipes dans le partage des bonnes pratiques. Participer aux revues de code et contribuer à l'amélioration continue des plateformes. Selon les projets, vous pourrez également intervenir sur : la définition de référentiels techniques, l'accompagnement des équipes de développement, le mentorat de Data Engineers, ou l'évolution vers un rôle de Tech Lead ou de Data Architect.

Qui êtes-vous ? Si pour vous être Head of Data / Architecte Data , c’est : Porter une vision globale des plateformes data et piloter leur transformation à l’échelle d’un groupe ; Concevoir des architectures data robustes, performantes et évolutives (data platform, BI, intégration) ; Structurer et optimiser les flux de données et les usages analytiques ; Mettre en place des pratiques solides de gouvernance, qualité et standardisation data ; Piloter des programmes data stratégiques avec une forte exigence de delivery et de performance ; Encadrer, structurer et faire grandir des équipes data pluridisciplinaires (data engineers, BI, analytics) ; Accompagner les directions métiers et IT dans leurs décisions autour de la donnée ; Intervenir sur des environnements cloud (notamment Azure ) avec une approche orientée architecture et industrialisation… Vous disposez d’une expérience solide (+10 ans) dans des environnements data complexes et avez déjà occupé des rôles de leadership type Head of Data, Architecte ou CTO Data .…Alors vous êtes le profil que nous recherchons ! Ce que nous allons faire ensemble ? Dans le cadre d’une mission stratégique, vous interviendrez pour structurer, faire évoluer et piloter une plateforme data à l’échelle groupe , avec une forte dimension transformation. À ce titre, vous serez amené(e) à : Définir et piloter la vision et la roadmap data (architecture, usages, gouvernance) ; Concevoir et faire évoluer une plateforme data moderne (data lake, data warehouse, BI, intégration) ; Structurer les flux, garantir leur performance et leur fiabilité ; Mettre en place des standards de gouvernance, qualité et gestion des données ; Accompagner les projets métiers dans l’exploitation de la data ; Encadrer les équipes et structurer l’organisation data ; Piloter la transformation dans la durée avec une approche pragmatique et orientée résultats ; Apporter une vision stratégique auprès des décideurs et accompagner les arbitrages clés. En résumé, vous jouerez un rôle central pour faire passer la plateforme data à un niveau de maturité supérieur , avec une vision long terme et un impact direct sur la performance de l’entreprise.

Contexte Le client déploie une plateforme décisionnelle stratégique dédiée à la fonction Achats, basée sur l’écosystème Microsoft Azure et Power BI. Cette solution centralise les données issues d’un data lake alimenté par de multiples sources (notamment plusieurs ERP majeurs et outils de gestion fournisseurs), permettant la production d’une trentaine de dashboards utilisés par plusieurs milliers d’utilisateurs métiers (Achats, Finance, Qualité, Industrie, Juridique). Le programme est structuré en mode Agile avec plusieurs releases annuelles et un environnement data particulièrement riche et complexe (plusieurs centaines de tables de données, modèles harmonisés et tables de mapping).

Dans le cadre d'un programme stratégique de transformation Data & IA au sein d'un grand groupe international, nous recherchons un Data Engineer Senior AWS pour contribuer à l'évolution et à l'industrialisation d'une plateforme Data Cloud déjà en production. Cette plateforme constitue le socle technologique permettant d'alimenter des solutions analytiques avancées et des cas d'usage innovants basés sur l'intelligence artificielle. Vous intégrerez une équipe Data multidisciplinaire évoluant dans un environnement international et fortement orienté Cloud. Missions Participer à la conception et à l'évolution de l'architecture Data Platform et Data Lake/Lakehouse. Développer et maintenir des pipelines de données robustes et performants. Concevoir et implémenter des traitements de données à grande échelle à l'aide des services AWS. Participer à l'intégration de nouvelles sources de données internes et externes. Mettre en œuvre les bonnes pratiques de Data Management, Data Quality et DataOps. Participer à l'automatisation des déploiements et à l'amélioration continue des chaînes CI/CD. Garantir la performance, la sécurité et la maintenabilité des solutions développées. Accompagner les équipes métiers dans la traduction des besoins fonctionnels en solutions techniques. Participer aux phases de mise en production et au support des environnements critiques. Contribuer aux travaux d'amélioration continue de la plateforme.

Notre client, acteur évoluant dans un environnement data complexe et exigeant, recherche un Data Engineer confirmé pour concevoir, construire et opérer une infrastructure de données robuste, couvrant l'ensemble de la chaîne de valeur — de l'ingestion jusqu'à la mise à disposition des données aux équipes métier — au sein d'un écosystème technologique moderne centré sur SQL Server, dbt et Power BI Reporting Services. Intégré(e) à une équipe pluridisciplinaire et travaillant en méthodologie Agile, vous interviendrez sur la conception et l'évolution d'une plateforme data structurée autour d'une architecture médaillon (Bronze / Silver / Gold), garantissant qualité, traçabilité et performance des données. Vous jouerez un rôle central dans la fiabilisation des pipelines ETL/ELT, la gestion des mécanismes d'alimentation (flux delta et flux plein, gestion de l'historique) ainsi que dans l'optimisation des traitements sur des volumes de données importants. Vous collaborerez étroitement avec les Product Owners, les équipes produit, plateforme et administration, afin de cadrer les projets, qualifier les besoins et produire des livrables à forte valeur ajoutée. La mise en œuvre de pratiques CI/CD (Azure DevOps ou GitLab) sera au cœur de votre démarche, assurant l'intégration continue, les tests automatisés, la qualité de code et l'orchestration des déploiements. Responsabilités : - Concevoir et développer des jobs ETL/ELT réutilisables et maintenables (SSIS, Talend, Azure Data Factory) - Modéliser et structurer les couches de données (Data Lake, Data Warehouse, Data Marts, Cubes SSAS) selon l'architecture médaillon - Gérer les mécanismes d'alimentation des flux de données : chargements delta et plein, gestion de l'historique et de la rejouabilité - Intégrer des sources de données hétérogènes via API, transferts de fichiers et autres mécanismes d'ingestion - Assurer le tuning et l'optimisation des requêtes SQL, DAX et MDX pour garantir les performances en production - Assurer le maintien en condition opérationnelle de la plateforme data et traiter les incidents de production - Participer aux phases de cadrage et de scoping des projets data avec les parties prenantes métier et techniques - Mettre en œuvre et maintenir les pipelines CI/CD, les tests de qualité de données et les processus de déploiement automatisés

Dans le cadre d’un programme de modernisation des outils Finance et de pilotage de la performance, notre client recherche un(e) Expert SAP Analytics Cloud Planning pour intervenir sur des sujets de budget, forecast, reporting et contrôle de gestion. La mission s’inscrit dans un environnement SAP EPM avec SAP SAC Planning, SAP Datasphere, SAP BTP, SAP S/4HANA et plateformes data externes type GCP / Data Lake . Missions Le consultant interviendra sur les activités suivantes : Analyse et cadrage des besoins métiers Finance Conception de modèles de planification dans SAP Analytics Cloud Planning Mise en place des dimensions, hiérarchies, versions et scénarios Création de règles de calcul, formules avancées, Data Actions et allocations Conception de reportings SAC, Stories et dashboards

🚀 Nous recrutons 3 Data Designer / Data Modeler (H/F) – Paris Dans le cadre de projets data stratégiques, nous recherchons un(e) Data Designer / Data Modeler pour intervenir au cœur de la transformation data de nos clients. 🎯 Vos missions : Concevoir les modèles de données (conceptuel, logique, physique) Recueillir les besoins métiers et structurer la donnée Participer à la mise en place de Data Warehouse / Data Lake / Lakehouse Garantir la qualité, la cohérence et la performance des données Collaborer avec les équipes Data Engineering, BI et Data 🧠 Votre profil : Expérience en modélisation de données (UML, Merise, dimensionnelle, Data Vault) Maîtrise de SQL et des bases de données Connaissance des outils de modélisation (PowerDesigner, ERwin…) Environnement cloud (Azure, AWS ou GCP) apprécié Bonne capacité à interfacer métier et technique 📍 Localisation : Paris (hybride) 📅 Démarrage : ASAP

Data engineer / analyst niveau expert Azure Fabrics 1j de présentiel par semaine (jeudi) La Direction Achats du Groupe a retenu la solution Microsoft Azure Power BI afin de mettre en place une solution d’aide à la prise de décision opérationnelle. Compétences techniques : - Maitrise technique parfaite de la solution Microsoft Azure : data lake, data factory, Azure SQL, Azure Analysis services, Power BI services (8 ans d’expérience minimum) - concevoir la gestion technique de données et leur structuration dans le BI (mise à jour du data modèle harmonisé lorsque nécessaire, construction des pipelines / ETL, mise en place des formules, utilisation Dax / langage M, construction de la solution de data viz) - gestion de projet (chaque évolution est gérée comme un mini projet pris en charge en autonomie par un consultant unique : à reception de la maquette le consultant doit mettre en place la solution, rédiger les slides de kick off des tests avec les utilisateurs, animer les sessions de demo et de test en autonomie, s’assurer de la livraison en prod à bonne date, participer à la rédaction du user guide métier). ANGLAIS PRO (animation de réunions en anglais) Tâches : - Développer les reports Procurement BI dont la maquette a été définie par les utilisateurs et l’UX Designer - Piloter et animer les recettes utilisateurs - Mettre en production les reports validés dans le respect du planning établi - Mapper les données issues des nouvelles sources (ERP, nouvelle application, etc …), charger les historiques, mettre en place les flux pour l’alimentation quotidienne automatique du BI, valider les chiffres. - Contribuer avec le reste de l’équipe BI au support utilisateurs (questions reçues par mail principalement) Expected skills Skills Skill level Microsoft Power BI Expert data lake Confirmed Azure Data Factory Advanced Microsoft Azure Expert

Contexte de la mission La Direction Achats a déployé une solution décisionnelle basée sur Microsoft Azure & Power BI afin de piloter la performance achats et les activités associées. La plateforme s'appuie sur : * Un data lake Azure alimenté par les outils de sourcing et +15 ERP * Environ 30 dashboards utilisés par plus de 2000 utilisateurs * Des thématiques variées : Performance achats Performance financière Impact carbone Risques fournisseurs Audits et conformité Aide à la négociation Le produit évolue en continu avec 4 releases annuelles en méthode Agile . Dans ce contexte, le consultant interviendra en autonomie complète sur des projets de bout en bout, depuis la compréhension du besoin jusqu'à la mise en production. Environnement Fonctionnel & Technique Domaines : Procurement / Achats / Industrie * Technologies : Azure Data Lake Azure Data Factory Azure SQL Azure Analysis Services Power BI (Service) DAX / Power Query (M) Environnement data : ~800 tables sources ~300 tables harmonisées ~20 tables de faits ~80 tables de mapping Missions principales Développement & Data Engineering * Construction des pipelines ETL (Azure Data Factory) * Mapping et intégration de nouvelles sources de données (ERP, applications) * Structuration et évolution du data model harmonisé * Optimisation des performances et des coûts Data Analyse & Data Visualization * Développement de dashboards Power BI à partir de maquettes (UX + métier) * Implémentation des mesures (DAX) et transformations (M) * Proposition de restitutions pertinentes orientées métier Gestion de projet & delivery * Prise en charge complète des évolutions en autonomie * Animation des workshops et échanges métiers * Pilotage des phases de test utilisateurs (recettes) * Organisation des démos et validation métier * Mise en production dans le respect des délais * Rédaction de la documentation fonctionnelle et utilisateur Support & amélioration continue * Support aux utilisateurs * Participation aux cérémonies Agile (daily, retro, refinement) * Amélioration continue du produit BI Responsabilités clés Gestion de bout en bout des projets BI (sans découpage des rôles) * Capacité à travailler sur des données peu documentées * Interprétation autonome des datasets complexes * Garantie du respect des délais de delivery * Force de proposition sur les innovations Microsoft Livrables Dashboards Power BI opérationnels * Data models et mappings documentés * Pipelines de traitement automatisés * Documentation utilisateurs et technique * Planning et suivi des livrables Compétences requises Techniques * Expertise Microsoft Azure Data (≥ 8 ans) * Très forte maîtrise Power BI (DAX, modeling, performance) * Expérience en construction de pipelines data (ETL / ELT) * Maîtrise des environnements data complexes