Raison d'être du poste : Le Data Integration Engineer intervient en renfort de l'équipe technique pour construire et faire évoluer les flux d'intégration et de diffusion de données de la data platform, dans le cadre de la roadmap V3 pilotée par le Head of Data. Il conçoit et développe les pipelines ETL/ELT ainsi que les API et connecteurs permettant à la plateforme d'exposer et de diffuser les données vers les outils consommateurs de l'écosystème. Il intervient sous la double supervision du volet transformation data (priorités métier) et du volet chef de projet roadmap technique (priorités d'architecture et de delivery). Finalités et Résultats Attendus : 1. Développement des flux d'intégration de données Concevoir, développer et maintenir les pipelines ETL/ELT sur Azure Synapse (et outils associés : Data Factory, éventuellement Fabric/Databricks), en garantissant la fiabilité, la performance et la traçabilité des flux entre systèmes sources et data platform. 2. Développement d'API et de connecteurs Développer des API et connecteurs permettant à la data platform d'exposer et d'envoyer des données vers les autres outils de l'écosystème (BI, applicatifs métier, outils tiers), en respectant les standards d'architecture définis avec le Head of Data. 3. Contribution à la roadmap V3 de la data platform Participer à la mise en œuvre des chantiers techniques de la roadmap V3 (évolution d'architecture, industrialisation des flux, migration ou ajout de briques technologiques), en lien avec le chef de projet roadmap technique. 4. Qualité, fiabilité et documentation Mettre en place des contrôles de qualité et de cohérence sur les flux développés, documenter les logiques de transformation et les spécifications techniques, et contribuer aux bonnes pratiques de développement (Git, CI/CD). 5. Collaboration avec les équipes data et métier Travailler en lien avec les data ingénieurs et les équipes data pour comprendre les besoins d'intégration, remonter les contraintes techniques, et challenger les solutions proposées. Les conditions 📍 Lille 🏢 Présentiel requis durant les 4 premiers mois, puis possibilité de 2 jours de télétravail par semaine. Un poste technique et polyvalent au sein d'une équipe Data, pour un profil qui souhaite travailler à la croisée du développement, de l'intégration et de la Data Platform.
Vous voulez voir vos pipelines faire tourner la logistique d'un géant de la distribution ? Cette mission est pour vous. VADEMI recherche un Data Engineer confirmé / senior pour rejoindre la Data Factory d'un grand groupe national de la distribution, en pleine accélération. Après de premiers succès, la Data Factory passe à l'échelle : nouvelle organisation Agile en Domaine / Tribu / Squad, industrialisation des pratiques et livraisons accélérées. Vous intégrez la Squad Supply / Logistique, qui conçoit des produits BI, Analytics et Data Science sur une plateforme Azure + Databricks. Vos traitements alimentent concrètement les entrepôts, les magasins et les consommateurs. Vos missions : - Recueillir les besoins métier et analyser les données - Concevoir et construire des pipelines de données au sein du Data Lake - Développer des notebooks Databricks pour des traitements avancés (PySpark / Spark SQL) - Optimiser les traitements et tuner les requêtes SQL (Cloud Data Warehousing) - Réaliser les revues de code et les tests unitaires - Assurer la QA / le testing des pipelines de votre binôme Data Engineer - Construire des tableaux de bord Power BI - Rédiger la documentation technique (Dossiers d'Analyse Technique, release notes) - Livrer en continu via une chaîne CI/CD Azure DevOps Pourquoi nous rejoindre ? - Un rôle complet et à fort impact, du besoin métier jusqu'au dashboard - Une stack moderne : Azure, Databricks, Spark, Lakehouse, CI/CD - Un environnement Agile structuré, au cœur de la Supply Chain d'un leader du retail - Un rythme hybride : 2 jours de télétravail par semaine - Une mission en régie jusqu'à fin décembre 2026, avec perspective de prolongation Démarrage : dès que possible (fin septembre au plus tard) – Châtillon (92), 3 jours par semaine sur site. Processus : après votre candidature, nous vous transmettrons une grille de compétences à compléter. Un test technique est prévu en présentiel lors de l'entretien client.
Rejoignez une entreprise reconnue dans le secteur de l'événementiel et des services B2B, implantée en région parisienne et présente à l'international. Dans le cadre de la transformation de son système d'information et de la modernisation de son environnement Data, l'entreprise poursuit notamment la migration progressive de son écosystème vers Microsoft Fabric. Afin de renforcer l'équipe IT & Data, nous recherchons un Data Engineer / Consultant Data SQL & Microsoft Fabric capable d'intervenir à la fois sur le maintien en conditions opérationnelles de l'entrepôt de données existant, le traitement des demandes quotidiennes et l'accompagnement de cette transformation technologique. La mission comporte donc une dimension importante de RUN et de support, mais également des sujets d'évolution, d'intégration de données et de migration vers les nouveaux outils Microsoft. Missions Gestion et support de l'entrepôt de données : Assurer le suivi et le maintien en conditions opérationnelles du Data Warehouse. Analyser et corriger les anomalies rencontrées sur les traitements et flux de données. Optimiser les requêtes, traitements et performances des bases de données. Participer à la fiabilisation et à la qualité des données. Support et traitement des demandes Data : Prendre en charge les différents tickets liés à la Data. Investiguer et résoudre les incidents techniques. Traiter les demandes métiers et réaliser les évolutions mineures nécessaires. Accompagner les utilisateurs et les équipes internes dans la résolution des problématiques rencontrées. Migration vers Microsoft Fabric : Participer à la migration progressive de l'écosystème Data vers Microsoft Fabric. Accompagner l'équipe dans l'adaptation des traitements et flux existants. Contribuer à la fiabilisation de la nouvelle architecture et à la transition entre les environnements historiques et Fabric. Intégration et évolution des flux : Développer et maintenir des traitements ETL sous SSIS. Participer à différents projets d'intégration de données avec des solutions tierces. Contribuer notamment à des sujets d'intégration de données avec Brevo et d'autres applications métiers. Intervenir sur différents besoins d'interfaçage et d'alimentation des systèmes Data. Documentation et amélioration continue : Documenter les traitements, flux et procédures existantes. Capitaliser sur les incidents rencontrés et les solutions apportées. Participer au partage des bonnes pratiques avec l'équipe interne. Contribuer à l'amélioration continue de l'environnement Data.
DigitalOps recherche, pour accompagner un acteur majeur, un Consultant Data / Data Engineer disposant d'une solide expertise Informatica IICS et d'une bonne connaissance des problématiques Supply Chain. Le consultant interviendra au sein d'un environnement Data orienté Supply Chain et participera à la conception, au développement et à la maintenance des flux d'intégration de données. Les principales missions seront : • Concevoir, développer et maintenir des flux ETL/ELT sous Informatica IICS / Informatica Cloud ; • Développer et optimiser des requêtes SQL complexes ; • Intégrer et transformer des données issues de différents systèmes métiers ; • Participer à l'analyse et à la résolution des incidents liés aux flux de données ; • Contrôler la qualité et la cohérence des données ; • Échanger avec les équipes métiers Supply Chain afin de comprendre les besoins fonctionnels ; • Participer aux phases de recette, documentation et mise en production ; • Contribuer à l'amélioration et à l'industrialisation des pipelines Data. Une connaissance des processus Supply Chain, Manufacturing, Procurement, stocks, commandes, approvisionnements ou distribution constitue un élément important de la mission.
Projet Développement et industrialisation d'une plateforme Data sur GCP permettant l'ingestion, la transformation et la mise à disposition de données pour des outils de recherche et d'analyse métier,. Activités - Concevoir et maintenir les pipelines d'ingestion de données publiques et internes. - Développer et industrialiser les traitements et transformations de données avec SQL, Python et dbt. - Mettre en place et maintenir les workflows d'orchestration avec Argo Workflows / Airflow. - Stocker, structurer et exposer les données via BigQuery et GCS, puis assurer leur connexion aux outils d'analyse métier. - Déployer et maintenir les composants Data sur GCP, notamment via Cloud Run, et gérer les droits d'accès avec IAM. - Industrialiser l'infrastructure avec Terraform et contribuer aux chaînes CI/CD GitLab. - Participer au monitoring, à la gouvernance et à la qualité des données ainsi qu'à l'amélioration de l'expérience utilisateur des outils internes.
Contexte de la mission Au sein de la DSI France, le département SI METIER & DATA souhaite renforcer sa capacitée à réaliser des projets Data. Au sein de l'équipe Data et de l'équipe projet, le Data Engineer réalise les intégrations de données, les traitements et les reportings dans PALANTIR Foundry. Il propose et recherche les meilleurs solutions techniques en collaboration avec l'équipe projet et participe au suivi quotidien des flux de données. Le projet concerne en particulier le traitement de données de consommations IT.
Démarrage : ASAP Localisation : Lille (59) avec 3 jours sur site/semaine Pour le compte d'un grand acteur international du secteur retail, nous recherchons un Data Engineer confirmé pour rejoindre une équipe Data pluridisciplinaire au sein d'un environnement cloud à forte volumétrie. Le contexte : Vous intégrerez une équipe composée de Data Engineers et d'experts DevSecFinOps, intervenant sur des projets stratégiques liés à la Supply Chain et à la valorisation de la donnée. Vous contribuerez à la conception, au développement et au maintien de solutions Data tout en participant à une démarche FinOps visant à optimiser les coûts d'exploitation des plateformes cloud. Vos missions : Build Participer aux projets Data liés aux enjeux Supply. Concevoir des solutions alignées avec les standards et frameworks Data de l'entreprise. Développer et modéliser les flux de données sous la gouvernance des architectes Data. Contribuer au développement d'applications Data. Réaliser les tests et validations techniques. Assurer le suivi et le reporting de vos activités. Run Maintenir en conditions opérationnelles plusieurs référentiels de données multi-sources ainsi que différentes applications Data. Gérer les incidents et demandes de support. Assurer les mises en production via les outils de CI/CD. Superviser et suivre les flux de données. Expertise Monter progressivement en compétence sur le système d'information et les domaines métiers associés. Participer à l'amélioration continue des pratiques Data et FinOps. Environnement technique : ✅ GCP ✅ BigQuery ✅ Apache Airflow ✅ Terraform ✅ GitLab ✅ Datalake ✅ Exposition de données / APIs Data ✅ Google Data Studio ✅ Python ✅ Shell
Missions principales : -Conception & Développement : bâtir des pipelines ETL/Data robustes et développer/maintenir les API d'exposition des données. -Architecture Databricks : optimiser les traitements et participer aux choix d'architecture selon l'approche Medallion (Bronze/Silver/Gold). -Qualité & Performance : garantir la fiabilité et l'optimisation des performances des traitements, et gérer la résolution d'incidents de production. -Leadership Technique : accompagner l'équipe sur les bonnes pratiques de dev et le déploiement de solutions.
Dans le cadre du renforcement d'une équipe Data Platform au sein d'une Digital Factory, nous recherchons un Data Platform & DataOps Engineer confirmé pour contribuer à l'exploitation, à l'industrialisation et à l'évolution de plateformes Data dans un environnement Cloud AWS. Votre rôle sera essentiel pour garantir la disponibilité, la sécurité, la performance et l'automatisation des services Data, tout en accompagnant les équipes Data Engineering, BI et Architecture. Vos principales responsabilités Data Platform & Cloud AWS Administrer et faire évoluer les plateformes Data. Concevoir et maintenir des architectures Cloud scalables, sécurisées et résilientes. Gérer les pipelines d'intégration, les environnements DEV/TEST/PROD et les habilitations. Optimiser les coûts d'infrastructure AWS dans une logique FinOps. DataOps, DevOps & automatisation Industrialiser les traitements et les déploiements Data. Mettre en place et maintenir les pipelines CI/CD. Automatiser le provisionnement des infrastructures avec l'Infrastructure as Code. Standardiser les composants Data et renforcer les tests automatisés. Monitoring & support Assurer le support technique N2/N3 et résoudre les incidents complexes. Mettre en place des outils de supervision, des alertes et des tableaux de bord opérationnels. Analyser les performances et anticiper les besoins en capacité. Sécurité & gouvernance Appliquer les standards de sécurité Cloud et de gestion des accès. Contribuer à la gouvernance, à la qualité et à la documentation des plateformes Data. Participer aux revues d'architecture et aux projets de transformation Cloud.
Dans le cadre de la réalisation d'un projet en assistance technique, nous recherchons un(e) Data & AI Engineering Tech Lead / Agentic AI Architect pour l'un de nos clients. Vous interviendrez sur le site client situé dans la métropole lilloise (59). À ce titre, vos missions quotidiennes seront les suivantes : - Définir l'architecture cible Data & IA / Agentic AI de la Supply Chain : conception d'architecture multi-agents, cadrage et sécurisation des échanges Agent-to-Agent (A2A), définition du Model Context Protocol (MCP), pilotage et challenge du POC A2A, et arbitrage entre SAP Joule et agents IA développés sur mesure ; - Définir l'intégration entre Databricks, Unity Catalog, SAP, AWS et GCP, travailler sur les sujets RAG / Graph RAG / Semantic Layer / Ontologie, et définir les règles de sécurité, IAM, Guardrails et Human-in-the-loop - Assurer un rôle de Tech Lead / référent technique auprès des équipes Data, IA, Cloud, Produit et des fournisseurs : challenge technique des éditeurs lors des RFI/RFQ, accompagnement des équipes internationales (contraintes spécifiques Chine incluses) - Évaluer les coûts (compute, tokens, maintenance, Capex/Opex) et définir la trajectoire technique et budgétaire IA pour 2027.
ContexteDans le cadre de l'évolution et de la modernisation d'une Data Platform, nous recherchons un(e) Staff Data Platform Engineer pour contribuer à l'excellence engineering de l'écosystème data. Au sein d'une organisation Data Mesh mature, vous aurez un rôle transverse de facilitateur, d'accélérateur et de référent technique auprès des différentes équipes Data Engineering. Votre mission sera de faire le lien entre les capacités de la plateforme centrale et les besoins opérationnels des équipes produit, avec un fort enjeu autour de la Developer Experience (DevEx), de la standardisation des pratiques et de l'accélération de la mise en production des produits data. Vos missionsDeveloper Experience & Data EngineeringOptimiser le cycle de vie des pipelines Data, du développement local jusqu'à la production. Concevoir et standardiser des paved paths permettant aux équipes Data de développer et déployer plus efficacement. Développer et partager des composants, templates et outils facilitant le travail des Data Engineers. Contribuer à la mise en place de standards autour du CI/CD, des tests, de l'observabilité et de la qualité. Promouvoir les bonnes pratiques d'ingénierie logicielle au sein de la communauté Data. Innovation & IAIntégrer les outils d'IA générative et de développement assisté dans les pratiques quotidiennes des Data Engineers. Identifier et développer des cas d'usage permettant d'améliorer la productivité des équipes. Participer à la construction d'un AI Toolkit dédié aux besoins du Data Engineering. Accompagner l'évolution des pratiques vers une ingénierie Data augmentée par l'IA. Architecture & Excellence techniqueConcevoir des frameworks et patterns favorisant la qualité, la maintenabilité et la fiabilité des pipelines. Mettre en place des mécanismes de feedback loop, observabilité, data quality et data contracts. Contribuer à l'évolution de l'architecture Data et à sa modernisation progressive. Challenger les pratiques et architectures existantes afin d'identifier les axes d'amélioration. Accompagner la transition progressive vers des architectures Open Lakehouse et des modèles Data modernes. Prendre en compte les enjeux de FinOps, sécurité et RGPD by design. Gouvernance & accompagnementÊtre le représentant des besoins de la communauté Data Engineering auprès de l'équipe Platform. Faciliter l'alignement entre les pratiques locales et les standards d'ingénierie globaux. Conseiller les équipes responsables du socle technique de la plateforme. Favoriser le partage de connaissances et la mutualisation des initiatives au sein de la communauté Data. Travailler avec des équipes internationales dans un environnement matriciel. Environnement techniqueData Engineering / Data Platform Data Mesh GCP / BigQuery Data Vault / Star Schema CI/CD DataOps Data Quality Data Contracts Observabilité API / CLI tooling YAML Automatisation GenAI / Copilots / AI Engineering Open Lakehouse FinOps GDPR / Privacy by Design
Au sein d'un grand groupe d'assurance de premier plan, vous rejoignez le pôle d'ingénierie data transverse pour concevoir, industrialiser et maintenir en conditions opérationnelles les pipelines de données alimentant le Datalake d'entreprise : Concevoir et développer les flux d'ingestion et de transformation de la donnée brute vers des modèles optimisés et requêtables par les métiers. Automatiser l'alimentation récurrente du Datalake et garantir la cohérence des couches de stockage (modèle médaillon). Développer les vues métier et les services de restitution (exposition de données, réintégration dans le SI, services de scoring). Garantir l'application des bonnes pratiques de développement (tests unitaires/intégration, CI/CD, documentation, versioning). Assurer le rôle de référent technique auprès de l'équipe pour sécuriser la qualité et la robustesse des livrables.
📍 À propos du rôle: Rejoignez le pôle Data Technology d'un fonds d'investissement quantitatif majeur basé au cœur de Paris. Au sein d'une équipe tech de 6 à 7 personnes, votre rôle sera d'être le garant absolu de la disponibilité, de la fraîcheur et de la qualité des données financières qui alimentent les modèles d'investissement. Ici, zéro trader : 100 % de l'activité repose sur la recherche quantitative et l'excellence technologique. 🎯 Vos 4 Piliers de MissionSupport & Exploitation N1/N2 : Prise en charge des alertes de production, diagnostic d'incidents en direct sur les pipelines de données et résolution des dysfonctionnements. Data Quality & Reliability : Contrôle proactif de l'intégrité des flux (détection des pertes silencieuses de lignes, validation de la fraîcheur et de la cohérence de la donnée avant l'ouverture des marchés). Développement & Automatisation Python : Conception et écriture de scripts Python natifs pour supprimer les tâches manuelles récurrentes, outiller la supervision et automatiser le rejeu de données (retries). Maintien en Condition Opérationnelle (MCO) : Accompagnement des mises en production et fiabilisation de l'intégration des nouvelles sources de données.
Nous recherchons un Data Engineer pour contribuer à la modernisation d'une plateforme data dans le secteur financier. Vous participerez à la conception et au développement de pipelines de données, à l'intégration de données dans Snowflake via DBT, à la modélisation des données et aux contrôles de qualité. Vous travaillerez également sur les flux batch/streaming, le SQL, les tests, la CI/CD, l'optimisation des performances ainsi que la gouvernance et la sécurité des données dans un environnement international.
Rejoignez une grande organisation du secteur de la grande distribution en tant que Data Analyst Senior pour piloter la transformation et l'optimisation des données de référence. Vous participerez à un projet stratégique visant à unifier, fiabiliser et moderniser les référentiels de données (produits, fournisseurs, tiers, sites) à l'échelle nationale et groupe, tout en assurant la migration progressive vers des architectures Cloud modernes. Au sein d'une équipe dédiée à la Digital Factory Référentiel, vous serez responsable de la conception et du pilotage d'un cockpit décisionnel de haute performance. Ce projet combine expertise analytique, modélisation de données sophistiquée et capacité à traduire les enjeux métiers en indicateurs actionnables. Vous évoluerez dans un environnement Agile, aux côtés de data engineers et de métiers exigeants, en mission de transformation durable. Le contexte technique s'appuie sur une stack Cloud GCP moderne, avec BigQuery comme moteur analytique central, complétée par Looker Studio pour la visualisation décisionnelle. Vous travaillerez sur des données massives, des pipelines complexes et des chaînes de Run critiques, dans un cadre méthodologique rigoureux. Responsabilités : - Définir et affiner les KPI de performance de la Direction Référentiel en collaboration étroite avec les métiers - Réaliser des analyses End-to-End des chaînes de traitement et d'exploitation des données de référence - Concevoir, construire et optimiser des dashboards décisionnels performants via Looker Studio / Looker, garantissant clarté et impact métier - Exploiter les données produites pour identifier les écarts, challenger les équipes métiers et proposer des axes d'amélioration continus - Assurer la fiabilité, l'intégrité et la disponibilité des données alimentant les analyses et tableaux de bord - Modéliser des structures de données complexes et concevoir des pipelines de données robustes et performants - Identifier et documenter les opportunités d'optimisation des processus métiers et techniques - Collaborer avec les équipes Data Engineering et DevOps pour la gouvernance, la qualité et l'automatisation des flux Télétravail : 2 jours par semaine Localisation : Massy
Product Owner Data : Socle analytique, ingestion & reporting Mission consultant · Île-de-France · Démarrage octobre 2026 · Jusqu'à début 2027 · TJM selon profil LE CONTEXTE Notre client, grand groupe de services à l'environnement, fait évoluer son socle analytique / Data. Objectifs : accélérer l'intégration de nouvelles sources, construire et enrichir les objets métiers (OBM), migrer les reportings vers Apache Superset, structurer la gouvernance et le catalogue de données, et s'appuyer sur des agents IA pour accélérer le delivery. Le projet couvre l'ensemble du cycle Data : conception, spécification, modélisation, développement, recette et mise en production. Vous intervenez sur le volet socle analytique, ingestion et reporting, en binôme avec un Data Engineer qui prend en charge la partie technique. Le périmètre comprend la création et la migration des rapports sous Superset, ainsi que la reprise d'au moins 50 Google Sheets connectés. VOS MISSIONS 1. Prendre en charge le cadrage fonctionnel des besoins Data, en lien avec les métiers 2. Analyser les rapports existants et identifier les données nécessaires 3. Définir et enrichir les objets métiers (OBM) 4. Rédiger les spécifications 5. Prioriser et gérer le backlog Data 6. Accompagner la recette métier
