Trouvez votre prochaine offre d’emploi ou de mission freelance Data Lake

Au sein de la Direction des Systèmes d'Information d'un groupe d'assurance de premier plan, vous intégrez l'équipe dédiée à la gestion courante et au pilotage du socle décisionnel. Dans un écosystème Big Data d'envergure collectant les données des différents back-offices métiers pour alimenter un lac de données (Data Lake) et un entrepôt communautaire hébergé sur une architecture de haute performance (Oracle Exadata), vous garantissez la continuité d'activité, la qualité de service et l'évolution des pipelines de traitement. Vos principales responsabilités : Suivi de production & exploitation : Assurer la supervision et le monitoring quotidien des chaînes de traitement de données distribuées (batch et streaming). Gestion des incidents & reprises de données : Diagnostiquer, instruire et résoudre les incidents fonctionnels et applicatifs sur les jobs Spark / Scala, en orchestrant les reprises de données nécessaires sans altérer la qualité de service. Maintenance évolutive & corrective : Développer et implémenter les correctifs et les évolutions mineures demandées par les métiers ou les équipes projets. Recette, tests et déploiements : Rédiger les plans de tests, exécuter les scénarios de validation unitaire et d'intégration, puis assurer la livraison sécurisée des patchs en environnement de production. Documentation & gouvernance : Rédiger les spécifications des correctifs, maintenir à jour la documentation d'exploitation et assurer un reporting rigoureux auprès du chef de projet.

Le Client est un groupe industriel international de haute technologie. Son identité et les informations détaillées le concernant seront communiquées aux prestataires consultés, sous couvert d'un accord de confidentialité. Contexte général L'équipe Data Platform du Client assure la mise à disposition, l'exploitation et l'évolution des plateformes de données permettant de collecter, stocker, transformer et distribuer les données de l'entreprise. Dans le cadre de la modernisation de son écosystème Data et de la mise en œuvre d'une architecture orientée Data Mesh, le Client souhaite déployer la solution Starburst afin de simplifier l'accès aux données, renforcer l'interopérabilité entre les plateformes et accélérer les usages analytiques. Le projet implique plusieurs acteurs (Architecture, Infrastructure, Cybersécurité, Data Platform, équipes Data Engineering, BI et Métiers). Afin de piloter le déploiement de cette nouvelle capacité stratégique, le Client souhaite s'appuyer sur un chef de projet expérimenté capable de coordonner l'ensemble des parties prenantes et d'assurer le pilotage du programme jusqu'à sa mise en production. Dans ce contexte, le Client a besoin d'un Chef de projet Data Platform disposant de la maîtrise des composants et technologies suivants : • Starburst Enterprise • Trino • Data Mesh • Data Virtualization • Data Lake • Cloud public (AWS - apprécié, Azure, GCP) • API et services de données • Gouvernance Data • Sécurité des données • Gestion des accès • Gestion de projet Agile et Cycle en V • Pilotage de fournisseurs • Gestion des risques Il est entendu que les responsabilités suivantes seront attendues : • Pilotage du projet Starburst o Cadrage du projet et des objectifs. o Construction et suivi du planning directeur. o Identification et suivi des risques. o Coordination des équipes techniques. o Pilotage des fournisseurs et intégrateurs. o Animation des comités projet. o Préparation des arbitrages. o Suivi budgétaire et capacitaire. • Coordination technique o Coordination des travaux d'architecture. o Coordination des équipes Infrastructure. o Coordination des équipes Cybersécurité. o Coordination des équipes Data Engineering. o Coordination des équipes BI et Analytics. o Coordination avec les équipes Groupe lorsque nécessaire. o Gestion des dépendances techniques inter-projets. • Gouvernance du programme o Mise en place de la gouvernance projet o Définition des indicateurs de pilotage o Construction de la feuille de route o Suivi des engagements fournisseur o Préparation et animation des comités de pilotage o Escalade et gestion des points bloquants • Accompagnement du déploiement o Organisation des ateliers de conception. o Coordination des phases d'installation. o Coordination des tests d'intégration. o Coordination des tests de performance. o Coordination des recettes métier. o Préparation des mises en production. o Accompagnement des phases de transition vers le Run. • Conduite du changement o Identification des impacts organisationnels. o Élaboration du plan de communication. o Suivi des actions d'accompagnement. o Coordination des formations. o Accompagnement des équipes utilisatrices. o Préparation des supports de présentation à destination du management. • Livrables attendus o Le prestataire devra produire :  Planning directeur du projet.  Roadmap du déploiement.  Cartographie des parties prenantes.  Registre des risques et actions.  Comptes-rendus des comités.  Dashboard de suivi du projet.  Plans d'action associés.  Dossiers de mise en production.  Dossiers de passage en RUN.  Supports de comité de pilotage.  Reporting mensuel.  Documentation projet.

Senior System Analyst with QA Our Client is a global company based out of Trumbull CT USA. You must have at least 7 years expertise as a Senior Systems Analyst coupled with at least 5 years QA skills. The Sr. System Analyst / QA will be part of an Integration team that is accountable for technical deliveries of integration projects and system enhancements, and production support services. The candidate is expected to work closely with applications, analytics, infrastructure, security, compliance, PMO, QA, and system analysis teams. Must be a strong analytical problem solver and creative thinker with the ability to ask the right questions and develop a point of view that will influence technical decisions. Be a disciplined self-starter and will deliver quality solutions to our global business. Team-play and visibility through routine and precise reporting and following of methods and processes is a major aspect of the work and can be a major success factor. This is a senior role that requires analysing complex problems and translate business needs into technical understanding and vice-versa, understand technical details sufficiently to conduct white-box testing and to reverse engineer, and own the projects/tasks to ensure the quality of the delivery. The ability and willingness to thoroughly document all the aspects of the integration projects/tasks is a key requirement for this role. Light-duty hands-on programming is also expected. Technical skills: In-depth knowledge and thorough experience in understanding and testing a variety of integrations. Understanding and experience with defect tracking processes and tools. Thorough experience in understanding, analyzing, and white-box testing (end-to-end) of integrations built using/with Azure integration tools like Data factory, LogicApps, Functions, API Management, Data catalog, WebApps, Integration service environment, configuring monitoring & diagnostics, etc., and connectivity & security configurations. Experience in understanding, analyzing, and white-box testing Azure data storage (Data lake, Synapse, etc.) & access tools, APIs, cloud connectivity, and ETL solutions. In-depth understanding of and experience with SOAP, XML, REST, JSON, EDI, XSLT, Async/Sync, Request/Response, Service Bus, Publish/Subscribe, Batch/Real-time, Scheduling, Event triggers, etc. Strong command over data analysis tools (e.g. MS Excel) and Documentation tools (e.g. MS Word) Experience with analyzing and testing APIs using Postman, SOAPUI, or similar tools. Experience in automated testing using relevant QA tools or by building custom scripts. Understanding of and light-duty programming experience using MS SQL Server (SSIS, T-SQL, Stored procedures, Functions, Views, Queries, Datatype conversions, etc.). High-level knowledge of architecture of the cloud and on-prem MSFT Suite (e.g. Share point) and Integration platforms architecture (e.g. BizTalk, MuleSoft, or similar), etc. Some experience in understanding, analyzing, and white-box testing of MS Office/MS Office 365 suite, SharePoint Online, Power Apps/Power Automate, GitHub, MS Teams, etc. Solid fundamentals and thorough understanding of exception handling principles and production/operational support solutions (alerts, dashboards, runbooks, etc.) Thorough understanding and practice/experience of identifying and high-level investigating performance issues to pin-point problem areas Experience with MS D365, ServiceNow, Azure Analytics tools, Azure Data lake, Azure Synapse, Azure BYOD & Data verse, Azure DevOps, Informatica, BI tools, etc., is a big plus. The role will be based in Trumbull, Connecticut USA. The salary for this role will be in the range $90K - $135K. Please do send your CV to us in Word format along with salary and availability.

Contexte de la missionDans le cadre du renforcement de sa gouvernance et de ses capacités Data, notre client recherche un Production Data Officer Senior capable d'intervenir à la fois sur les dimensions stratégiques, organisationnelles et opérationnelles de la Data. Le consultant rejoindra un environnement industriel multi-sites et aura pour rôle de définir, structurer et faire appliquer les standards Data à l'échelle du groupe et de ses différentes entités. Basé principalement sur le site principal, le consultant devra être mobile ponctuellement sur plusieurs sites industriels du groupe. La mission est prévue pour une durée minimum de 6 mois, avec une possibilité de prolongation et une perspective potentielle de collaboration à plus long terme. ResponsabilitésData GovernanceDéfinir et déployer les standards, principes et bonnes pratiques Data à l'échelle du groupe. Mettre en place et faire vivre un cadre de Data Governance commun aux différentes entités. Accompagner les filiales dans l'adoption et la déclinaison des standards groupe. Fournir une guidance adaptée aux différents métiers et équipes IT/Data. Assurer la cohérence des pratiques Data entre les différentes entités. Data ArchitectureParticiper à la définition et à l'évolution de l'architecture Data cible. Disposer d'une bonne compréhension des architectures Data Lake et des approches Data-Driven / Data Domain. Contribuer à la structuration des flux, des sources et des domaines de données. Être capable de challenger les choix d'architecture et de proposer des orientations pragmatiques. Structuration et catalogage des donnéesOrganiser, structurer et documenter les données de l'entreprise. Mettre en place et faire évoluer les pratiques de Data Cataloging. Garantir la qualité, la traçabilité et la compréhension des données. Conserver une approche hands-on, malgré un positionnement senior et stratégique. Data AnalyticsContribuer à la définition de la stratégie Data Analytics. Orienter les équipes dans la définition des cas d'usage et des priorités analytiques. Promouvoir une approche permettant de transformer les données en leviers de performance opérationnelle et décisionnelle. Coordination et accompagnement des filialesCoordonner et engager des équipes Data/IT réparties sur plusieurs sites. Traduire les orientations Data du groupe en actions concrètes au niveau des différentes entités. Accompagner notamment les équipes opérationnelles et industrielles dans l'appropriation des standards Data. Favoriser l'alignement et la collaboration entre les différentes filiales. Environnement techniqueUne bonne maîtrise des environnements suivants est attendue : AWS Snowflake Power BI Collibra MQTT / brokers MQTT – connaissance indispensable Le candidat devra disposer d'une compréhension suffisamment large de l'écosystème Data pour pouvoir dialoguer avec les équipes d'architecture, infrastructure, IT, production et métiers. LanguesFrançais : courant Anglais : courant / professionnel En résuméCette mission s'adresse à un Data Leader senior, capable de prendre de la hauteur sur la stratégie Data tout en restant suffisamment opérationnel pour structurer les données, les processus et les pratiques. La réussite de la mission reposera autant sur les compétences techniques et Data que sur la capacité du consultant à fédérer plusieurs équipes, influencer des interlocuteurs de haut niveau et faire converger plusieurs entités industrielles autour d'une même vision Data.

Senior Software Engineer Architect – Trumbull CT USA Our Client is a Global organisation who are looking to recruit a Senior Software Engineer with Architect expertise. You must have at least 7 years proven track record of developing complex software coupled with Architect skills. Technical architecting, hands-on programming, problem-solving, PoC building, and owning, building, and reviewing thorough documentation. Work closely with business champions, vendors, project managers, system analysts, QA, compliance, regulations, security, operations, and infrastructure teams to create and/or review integration-focused project documents to cover all the relevant aspects including data, tools, security, compliance, and operations requirements. Develop/Program proofs-of-concept. Support developers in problem-solving. Conduct code-reviews. A bachelor's degree in computer science, software engineering, or a related field is required. Master's is preferred. A minimum of seven (7) years of progressively complex experience in a directly related area, during which both professional and technical capabilities have been clearly demonstrated. A minimum of seven (7) years of architecting, design and development experience with various relevant Microsoft platforms (predominantly with Azure), tools, technologies, patterns, and techniques related to integration and data is required. A minimum of three (3) years of experience must be as an architect or solution designer with relevant job functions and technologies is required. Hands-on programming experience throughout is a must. Experience with healthcare industry regulations, data security and compliance standards (e.g. GDPR), and EDI standards (e.g. FHIR, HL7), etc. is very much preferred. Experience with industry/domains like pharmaceutical, finance, HR, sales, marketing, and manufacturing is valuable. Architecture certification like TOGAF or similar, and Developer certifications of Azure and/or Microsoft suite technologies is a big plus. Technical skills: In-depth knowledge and thorough experience in working with a variety of integration patterns is very important. In-depth knowledge and thorough experience in programming, configuring, and/or integrating using/with Azure integration tools like Data factory, LogicApps, Functions, API Management, Data catalog, WebApps, Integration service environment, configuring monitoring & diagnostics, etc., and connectivity & security configurations (certificates, encryptions, etc.). In-depth knowledge and experience with Azure data storage (SQL Server, Data lake, Synapse, etc.) & access tools, APIs, cloud connectivity, and ETL processes. In-depth knowledge & experience using Visual Studio, with one of the programming languages C#/Java/JavaScript/Python, PowerShell, and Postman, SOAPUI or similar tools. In-depth knowledge and thorough experience of using Serverless, SOAP, XML, REST, JSON, EDI, XSLT, Async/Sync, Request/Response, Service Bus, Publish/Subscribe, Batch/Real-time, Scheduling, Event triggers, etc. In-depth knowledge and development experience using MS SQL Server (SSIS, T-SQL, Stored procedures, Functions, Views, Queries, Datatype conversions, etc.). Knowledge and experience of MS Office/MS Office 365 suite, SharePoint Online, Power Apps, GitHub, MS Teams, etc. Thorough understanding of the fundamental architecture of the cloud and on-prem MSFT Suite (e.g. Share point) and Integration platforms architecture (e.g. BizTalk, MuleSoft, or similar), and version control methods. Solid fundamentals and thorough understanding of exception handling principles and production/operational support solutions (alerts, dashboards, runbooks, etc.) Thorough understanding and practice/experience of designing performance tuned architecture, investigating performance issues and fixing and tuning the systems Experience working with Azure DevOps and CI/CD pipeline. Experience working with MS D365, ServiceNow, Azure Analytics tools, Azure Data lake, Azure Synapse, Azure BYOD & Data verse Experience or knowledge of Informatica, BI tools, etc. is a big plus. The position will be based in either Trumbull CT or Livingston NJ USA. The salary for this role will be in the range $100K - $135K. Please send your CV to us in Word format along with your salary and availability.

Leadership Data/Data Modelling- Structuration & Gouvernance des données d'ingénierie - Clermont-Ferrand Qualifications : Data Modelling & Design,Digital Twin (Performance Twin),Master Data Management, Contexte : grand groupe industriel international, dans le cadre d'une démarche de transformation digitale :enjeu de structurer les données d'ingénierie comme un véritable actif stratégique. Mission principale : définir et déployer une stratégie de structuration et de gouvernance des données d'ingénierie (modèles de données, conventions de nommage, classification, cycle de vie), en garantissant traçabilité et réduction des silos entre systèmes. Architecture & outils : contribuer aux décisions d'architecture data (data lake, plateformes, intégrations) et à la cohérence entre outils, modèles et usages, en lien avec les initiatives digitales et Industrie 4.0 du groupe. Compétences techniques clés : data management / gouvernance / data modeling, architecture des données, notions de digital thread / digital twin / IA appliquée à l'ingénierie, bonne compréhension des outils et applications d'ingénierie. Posture attendue : forte autonomie, capacité à piloter un alignement transverse entre plusieurs directions (métier, IT/Digital, initiatives 4.0) sans lien hiérarchique, pédagogie pour faire adopter des règles simples aux équipes d'ingénieurs. Niveau / séniorité : Leadership (autonomie élevée, capacité à initier l'activité et définir des jalons) — anglais professionnel recommandé pour les échanges avec les équipes globales. Modalités : mission jusqu'à fin d'année (renouvelable), démarrage rapide, hybride avec présence ponctuelle sur site (région Clermont-Ferrand) Qualifications : Data Modelling & Design,Digital Twin (Performance Twin),Master Data Management,

Data Engineer Snowflake. TJM Max Confirmé (4ans+) = 430€ TJM Max Senior(7ans+) = 480€ Client : Transport Localisation : Issy les Moulineaux (3j sur site, 2j en TT) Démarrage : ASAP Durée : 3 mois renouvelable Dans le cadre de l'évolution du DataHub vers une architecture Data Lakehouse, le client engage une bascule progressive depuis une architecture BI classique (ETL Talend, DWH centralisé) vers un modèle cible de type Lakehouse. Cette trajectoire inclut la migration des flux existants, la mise en place de nouvelles zones data (Landing Zone, Data Lake, Datamarts, Data Products) et le décommissionnement de Talend. Le/la Data Engineer intervient sous la responsabilité du Responsable de l'équipe technique et en appui du Techlead sur le projet de bascule Lakehouse. Son périmètre couvre à la fois la contribution au projet de décommissionnement Talend et de nouvelle architecture Snowflake, la réalisation de projets et demandes évolutives sur le périmètre data existant, ainsi que le traitement des incidents et le support au Run. Compétences obligatoires : Snowflake : connaissance solide de l'environnement, langages et outils associés : SQL, Snowpipe, Snowpark, RBAC, supervision, Python, SQL avancé … etc Terraform : expérience confirmée Talend : connaissance de l'outil ou à défaut un ETL équivalent dans le cadre de la bascule de l'ETL vers l'ELT ou la gestion de la maintenance évolutive et corrective en parallèle Compétences appréciées : Power BI Expérience Data Lakehouse / Data Mesh AWS (Lambda, services serverless) Livrables attendus Inventaire et documentation des jobs Talend repris Pipelines Snowflake industrialisés issus de la migration Talend Modèles Lakehouse documentés Contribution à la stratégie de migration et de décommissionnement Talend Développements réalisés sur les projets et demandes évolutives traités Suivi et documentation des incidents traités (analyse de cause racine, correctifs)

Dans le cadre de l'accélération de sa transformation technologique et digitale, un grand groupe bancaire recherche un Développeur Microservices .NET / Angular confirmé. Le consultant intégrera une équipe internationale spécialisée dans les plateformes Data & IA, les architectures Big Data, les Data Lakes, les environnements Lakehouse Cloud, la Business Intelligence et le déploiement de solutions de Machine Learning Missions principalesConcevoir, développer et maintenir des microservices en C#/.NET Core 6+. Développer et intégrer des API REST selon les standards et patterns de l'équipe. Contribuer ponctuellement au développement d'interfaces front-end avec Angular. Participer aux choix d'architecture et à la conception technique des solutions. Réaliser les revues de code et garantir la qualité des développements. Développer et maintenir les pipelines CI/CD avec Jenkins et Groovy. Gérer les déploiements avec XLDeploy et XLRelease. Déployer et maintenir les applications conteneurisées sur OpenShift/Kubernetes. Utiliser Git et Bitbucket pour la gestion des versions et la collaboration. Rédiger et maintenir la documentation technique. Participer aux cérémonies Agile : Sprint Planning, Daily Meeting, revue et rétrospective. Collaborer quotidiennement avec les équipes basées en France et au Portugal. Compétences techniquesC# / .NET Core 6+ : niveau confirmé. Architecture microservices, API REST et design patterns : niveau confirmé. Jenkins, Pipeline as Code et Groovy : excellente maîtrise. XLDeploy / XLRelease : pratique courante. OpenShift / Kubernetes : pratique courante. Git / Bitbucket : excellente maîtrise. Angular : capacité à intervenir ponctuellement sur le front-end. Python : connaissances appréciées. Conteneurisation et environnements Cloud/Data : bonne compréhension.

Intitulé : Data Engineer Senior IA (H/F) Expérience : +7 ans minimum Mode de travail : Hybride Localisation : Île-de-France Démarrage : ASAP Secteur : Services financiers Environnement : AWS, Spark, Python, SQL, DataOps, Gouvernance Data, CI/CD ContexteDans le cadre de l'accélération de sa stratégie Data, un grand groupe du secteur des services financiers recherche un(e) Data Engineer Senior pour rejoindre sa Direction Data & IA. Vous interviendrez au sein d'une équipe en charge de la conception, de l'industrialisation et de l'exploitation des plateformes de données destinées à soutenir les enjeux métiers, réglementaires et analytiques de l'entreprise. Votre rôle consistera à concevoir des architectures Data robustes, piloter l'industrialisation des pipelines de données et garantir la qualité, la gouvernance et la valorisation des données à grande échelle. Missions principalesPilotage des projets DataGérer un portefeuille de projets Data couvrant l'ensemble du cycle de vie de la donnée : ingestion, transformation, exposition et gouvernance. Accompagner les métiers dans l'identification et la formalisation de leurs besoins Data. Traduire les besoins fonctionnels, techniques et réglementaires en solutions concrètes et industrialisables. Être le référent technique Data auprès des chefs de projet, architectes, développeurs, data analysts, data scientists et parties prenantes métier. Piloter les choix techniques et garantir leur cohérence avec les standards de l'entreprise. Conception et développement des pipelines DataConcevoir, développer et maintenir des pipelines d'ingestion de données : Batch APIs Flux programmés Chargements de fichiers Développer des traitements ETL / ELT alimentant un Data Lake et des plateformes analytiques. Mettre en œuvre les bonnes pratiques de modélisation des données. Garantir la performance, la qualité, la résilience et la maintenabilité des traitements. Assurer l'industrialisation complète des développements réalisés. Challenger les choix techniques et méthodologiques proposés par les autres membres de l'équipe. Architecture Data et IndustrialisationConcevoir des architectures Data modernes, modulaires et évolutives. Définir et appliquer les principes DataOps : Automatisation Versionning CI/CD Reproductibilité Observabilité Favoriser la mutualisation et la réutilisation des composants existants avant tout nouveau développement. Construire et maintenir : Pipelines ETL / ELT Chaînes CI/CD APIs de diffusion de données Mécanismes de monitoring et d'alerting Collaborer avec les équipes Data, Cloud et IA afin d'harmoniser les pratiques et accélérer les déploiements. Gouvernance, qualité et conformité des donnéesDéfinir et promouvoir les standards de développement Data. Garantir la qualité, la traçabilité et la conformité des données. Structurer les pratiques autour de : Git et workflows de développement Tests automatisés Documentation Data Catalog Métadonnées Lignage des données Infrastructure as Code Réaliser des audits techniques des pipelines et jeux de données. Assurer la conformité des solutions avec les exigences réglementaires et les politiques internes de gouvernance. Garantir la reproductibilité attendue lors des contrôles et audits. Leadership technique et accompagnementEncadrer et accompagner les Data Engineers juniors et intermédiaires. Participer à la montée en compétences de l'équipe. Assurer un rôle de mentor et de référent technique. Vulgariser les enjeux Data auprès des utilisateurs métiers. Participer aux revues d'architecture et aux processus de validation technique. Contribuer à la diffusion des bonnes pratiques Data et DataOps. Innovation et veille technologiqueRéaliser une veille active sur les technologies Data, Cloud et IA. Identifier les opportunités d'amélioration des plateformes existantes. Proposer des solutions innovantes répondant aux enjeux métiers. Anticiper les évolutions réglementaires et les enjeux liés à la qualité, la gouvernance et la souveraineté des données.

Je suis Sheeranaze MEHENTAL, Consultante en recrutement au sein de FED IT, cabinet de recrutement spécialisé sur les métiers des systèmes d'information et de la transformation digitale : infrastructure, chefferie de projet, data, cybersécurité, développement et top management. Je recrute pour mon client basé à Montigny le Bretonneux, un Data ngénieur H/F dans le cadre d'un CDI. Rattaché à la Data Factory, dans l'équipe « Applications et Innovations ». L'objectif principal est de concevoir, développer, maintenir et sécuriser les flux et plateformes de données métiers, principalement dans un environnement Microsoft Azure. 🔧 Missions principales Le poste couvre 6 grands axes : * Plateformes Data : mettre en œuvre, piloter et maintenir les infrastructures et plateformes de données. * Flux de données : développer et maintenir les échanges entre les différents systèmes, avec supervision et monitoring. * Modélisation & architecture : documenter, modéliser et organiser les flux de données. * Data Quality : mettre en place des contrôles et des solutions pour garantir la qualité des données. * Relation avec les métiers : travailler directement avec les équipes métiers pour comprendre leurs besoins et résoudre leurs problématiques data. * Support & projets : assurer du support de niveau 3 et participer/conduire des projets liés à la donnée. ☁️ Technologies recherchées Le cœur technique de l'annonce est clairement Azure Data Engineering : * Azure Data Factory → ETL / orchestration des pipelines * Azure Functions → traitements et automatisations * Azure Data Lake Storage Gen2 (ADLS Gen2) → stockage des données * Azure PostgreSQL → bases de données * SQL → requêtage, transformation et exploitation des données * Outils de modélisation de données * Concepts de modélisation et d'entrepôts de données ⭐ Technologies « plus » Ce sont des atouts mais semblent moins indispensables : * Talend * Power BI * Salesforce * SAP

Expérience5 ans minimum en Data Engineering 🚀 DémarrageDès que possible – au plus tard fin septembre 2026 🏠 Télétravail2 jours de télétravail / semaine 3 jours de présence obligatoire sur site / semaine 🎯 Contexte de la missionAu sein de la Direction des SI Mutualisés, l'équipe DataLab intervient sur les périmètres Data & Analytics dans le cadre du programme de transformation du SI du Groupement Les Mousquetaires. Le consultant intégrera la Data Factory, qui regroupe les équipes Data de la Stime et des métiers. Cette organisation a pour objectif de concevoir et déployer des produits Data, BI, Analytics et Data Science à destination des fonctions support, des équipes logistiques, des magasins et des consommateurs. Dans un contexte de passage à l'échelle et d'industrialisation des pratiques Data, vous rejoindrez une Squad Supply / Logistique, en charge du développement de cas d'usage BI, Analytics et Data Science sur une plateforme Data basée sur Microsoft Azure et Databricks. 🎯 Description de la missionNous recherchons un Data Engineer Confirmé / Senior, polyvalent et opérationnel, disposant d'une solide expertise sur : Azure Databricks Apache Spark Python SQL Le consultant devra également avoir une forte appétence pour l'analyse de données et être capable d'intervenir sur les activités de QA et de testing, afin de garantir la qualité et la fiabilité des livrables de la Squad. Une expérience sur Power BI ainsi qu'une première expérience dans un environnement Supply Chain / Logistique seront fortement appréciées. 🔧 Missions principalesRecueillir et analyser les besoins Data Réaliser des analyses de données Concevoir et développer des pipelines de données Transformer, enrichir et traiter les données au sein du Data Lake Développer des notebooks Databricks pour les traitements avancés Concevoir et optimiser les traitements Data Mettre en œuvre des solutions de Cloud Data Warehousing Optimiser les requêtes SQL et réaliser le tuning des traitements Rédiger la documentation technique : dossiers d'analyse technique, release delivery notes, etc. Participer aux revues de code Garantir l'application des bonnes pratiques de développement Concevoir et exécuter les tests unitaires Réaliser les activités de QA / testing des pipelines développés par les autres Data Engineers de la Squad Concevoir et maintenir des tableaux de bord Power BI Livrer les développements dans un environnement DevOps / CI-CD Participer à l'amélioration continue des pratiques Data Engineering 🧩 Compétences techniques requisesCompétenceExpérience minimaleExpérience Data Engineering5 ansAzure3 ansDatabricks3 ansSpark3 ansPython5 ansSQL5 ansCI/CD – Azure DevOps3 ansAgile / JIRA1 an ⭐ Compétences appréciéesPower BI Expérience Supply Chain / Logistique Data Lake / Cloud Data Warehouse Optimisation et performance des traitements Data QA / Data Quality / Testing Environnement Agile à l'échelle

Nous recherchons un(e) Ingénieur(e) Qualité Logicielle IT expérimenté(e) pour piloter les activités d'assurance qualité sur des plateformes de données complexes, des pipelines ETL et des écosystèmes Cloud. Le poste nécessite une combinaison solide de compétences en tests manuels, SQL avancé, tests ETL / Data, réconciliation et validation des données, tests API et tests de plateformes Data Cloud. La personne interviendra en étroite collaboration avec des équipes pluridisciplinaires afin de garantir la qualité des livraisons de données. Principales responsabilités : - Réaliser des tests end-to-end sur les processus ETL et les workflows Data afin de valider les étapes d'extraction, de transformation et de chargement des données. - Analyser les exigences fonctionnelles et techniques et élaborer les scénarios, cas et stratégies de tests. - Rédiger et exécuter des requêtes SQL avancées pour contrôler les jointures, agrégations, transformations et règles métier. - Développer et maintenir des solutions automatisées de validation des données avec Python, PySpark et Pandas. - Tester les pipelines Data développés avec Azure Data Factory, Azure Databricks et Azure Data Lake Gen2. - Réaliser des tests API et d'intégration avec Postman et d'autres outils afin de garantir l'intégrité des données entre les différents services. - Gérer le cycle de vie des anomalies : création, qualification, priorisation et suivi jusqu'à leur résolution. - Suivre l'avancement des campagnes de tests, produire les reportings et communiquer les risques aux différentes parties prenantes.

Nous recherchons un(e) Ingénieur(e) QA / Qualité Logicielle IT expérimenté(e) pour piloter les activités d'assurance qualité sur des plateformes de données complexes, des pipelines ETL et des écosystèmes basés sur le Cloud. Le poste nécessite une solide combinaison de compétences en tests manuels, SQL avancé, tests ETL/Data, réconciliation des données, tests d'API et tests de plateformes de données Cloud. La personne retenue travaillera en étroite collaboration avec les équipes pluridisciplinaires afin de garantir la qualité des mises en production de données. Responsabilités principales : Réaliser des tests de bout en bout des processus ETL et des workflows de données, en validant les processus d'extraction, de transformation et de chargement. Analyser les exigences fonctionnelles et techniques et élaborer des scénarios, cas et stratégies de tests détaillés. Rédiger et exécuter des requêtes SQL avancées afin de contrôler les jointures, agrégations, transformations et règles métier. Développer et maintenir des solutions automatisées de validation des données avec Python, PySpark et Pandas. Tester les pipelines de données développés avec Azure Data Factory, Azure Databricks et Azure Data Lake Gen2. Réaliser des tests d'API et d'intégration avec Postman et d'autres outils, en garantissant l'intégrité des données entre les différents services. Assurer la gestion du cycle de vie des anomalies, documenter les défauts, évaluer leur impact et collaborer avec les équipes concernées pour leur résolution. Suivre l'avancement des tests, communiquer l'état des activités et remonter les risques aux différentes parties prenantes.