Trouvez votre prochaine offre d’emploi ou de mission freelance Data Lake à Lille

Vous serez intégré dans une équipe pluridisciplinaire (Data Engineer, DevSecFinOps) Vous travaillerez sur un use case dédié en collaboration avec les équipes Data (tech lead, gouvernance et architectes). Vous devrez avoir une approche FINOPS (Maîtrise et diminution des coûts) BUILD - Interlocuteur lors de la contribution à des projets dans le domaine de la Supply - Conception de solutions en respectant les normes et framework data - Développement, Modélisation sous la gouvernance de l'architecture data - Contribution au développement d'appli - Tests - Reporting RUN : - Maintien en condition opérationnelle de notre périmètre de responsabilité (4 référentiels de données opérationnels (RDO) multi sourceurs, 6 applications) - gestion des incidents - mise en production (via Git) - suivi de flux EXPERTISE : - Montée en compétence sur notre SI et notre domaine de responsabilité

Contexte : Dans le cadre de la structuration et de la gouvernance des données au sein d’un système d’information complexe et fortement interconnecté, nous recherchons un Data Steward. Le Data Steward joue un rôle clé dans la qualité, la fiabilité et la bonne utilisation des données au sein de l’organisation. Il agit en interface entre les équipes métiers, les équipes IT et les data owners afin de garantir la cohérence, la traçabilité et la conformité des données tout au long de leur cycle de vie. Missions principales :Gouvernance et qualité des données Définir, formaliser et maintenir les règles de gestion des données Mettre en place et suivre les indicateurs de qualité (complétude, unicité, cohérence, fraîcheur) Identifier, analyser et corriger les anomalies de données Participer à la mise en place de processus de Master Data Management (MDM) Assurer le suivi des référentiels de données et des données de référence Modélisation et référentiels Contribuer à la définition des modèles de données conceptuels et logiques Participer à la structuration des dictionnaires de données et catalogues Garantir l’uniformisation des définitions entre les systèmes Collaborer avec les Data Architects et Data Owners sur la définition des objets métier Qualité et exploitation des flux de données Suivre les flux de données issus des systèmes sources (API, ETL, ESB, streaming) Contrôler la qualité des données injectées dans les plateformes analytiques Participer à la mise en place de contrôles automatisés (data quality checks, profiling, dédoublonnage) Contribuer au monitoring des flux et à la détection d’anomalies Support aux métiers Accompagner les utilisateurs métiers dans la compréhension et l’usage des données Garantir la bonne utilisation des référentiels dans les outils opérationnels et décisionnels Participer à la diffusion d’une culture data au sein des équipes Environnement technique :Data & Intégration API REST / SOAP ETL (type Azure Data Factory ou équivalent) ESB / Message Broker (Kafka ou équivalent) Bases de données relationnelles (PostgreSQL, SQL Server, MySQL) Bases NoSQL (MongoDB) Cloud & Data Platform Environnements Cloud (Azure principalement, éventuellement AWS ou GCP) Data Warehouse / Data Lake Solutions de gouvernance et catalogage de données BI & exploitation Outils de visualisation (Power BI, équivalent) SQL avancé pour analyse et contrôle qualité Outils de monitoring des flux et de data quality

Contexte de la mission Dans le cadre du renforcement d’une équipe IT RH et de la sécurisation des flux de données RH, nous recherchons un Consultant Expert Technico-Fonctionnel Workday afin d’accompagner les équipes techniques et métiers dans l’intégration et l’exploitation de la plateforme Workday. Le consultant interviendra au cœur des sujets d’intégration, de monitoring des interfaces critiques et de fiabilisation des données RH, en lien étroit avec les équipes Data et les experts fonctionnels RH. Vos missionsExpertise Intégration Workday Concevoir, développer et maintenir les intégrations Workday : EIB Inbound / Outbound Cloud Connect Workday Studio Exploiter les APIs et Web Services Workday : SOAP / WSDL REST API RaaS WQL Participer à l’administration et à la sécurisation des comptes ISU Workday. Assurer la robustesse, la maintenabilité et la performance des flux d’intégration. Monitoring & Support Run Assurer le suivi quotidien des interfaces RH et paie. Analyser les logs d’erreurs et traiter les incidents d’intégration. Collaborer avec les équipes métiers afin de corriger les rejets et sécuriser les flux critiques. Participer à l’amélioration continue des pratiques de supervision et de support. Audit & Qualité des Données Investiguer les écarts de données entre Workday et le Data Lake. Réaliser des analyses technico-fonctionnelles afin d’identifier l’origine des données dans les Business Processes Workday. Documenter les mappings, règles de gestion et flux d’intégration. Collaborer avec les équipes Data sur les sujets liés à GCP / BigQuery. Environnement technique Workday HCM Workday Studio EIB / Cloud Connect APIs REST / SOAP / WSDL RaaS / WQL GCP / BigQuery Monitoring et gestion des interfaces RH

4. Description de la prestation et des missions attendues Le/La Data Engineer sera intégré(e) à l'équipe produit TOPASE NLS et interviendra sur les missions suivantes : 🔹 Conception, développement et optimisation des pipelines de données (GCP) Concevoir, développer et maintenir des pipelines robustes et performants pour la collecte, la transformation et le chargement des données depuis diverses sources (Oracle, fichiers, API, etc.) vers BigQuery et autres cibles. Exploiter et orchestrer les services Google Cloud Platform (Dataflow, Dataproc, Cloud Composer/Airflow, Pub/Sub, Cloud Storage, BigQuery) afin de construire des architectures data scalables et fiables. Automatiser les traitements, gérer les dépendances et orchestrer les jobs de données. Optimiser les performances des pipelines ainsi que la consommation des ressources GCP. 🔹 Modélisation et gestion des données Participer à la conception et à l'évolution des modèles de données dans BigQuery, en lien avec les Data Analysts et les équipes métiers. Garantir la qualité, la cohérence et l'intégrité des données. Mettre en œuvre des stratégies de versioning des schémas et de gestion du cycle de vie des données. 🔹 Run opérationnel, maintenance et support N2/N3 Assurer le support opérationnel de niveau 2/3 de la solution TOPASE (environnement GCP + solution éditeur). Développer et maintenir des scripts Bash pour automatiser les tâches récurrentes (supervision, traitement de données, maintenance). Rédiger, optimiser et exécuter des requêtes SQL complexes (BigQuery et Oracle) pour l'analyse, le diagnostic d'incidents et la restitution de données. Gérer les incidents en collaboration avec les équipes internes et l'éditeur. Participer à la qualification des livraisons de patchs éditeur impactant les flux de données. Suivre les incidents via le CRM éditeur et contribuer aux comités de suivi. 🔹 Monitoring, logging et alerting Mettre en place et maintenir des dispositifs de supervision des flux de données, de la qualité, des performances et de l'utilisation des ressources (Stackdriver, Grafana, Looker Studio). Définir et implémenter des alertes permettant la détection proactive des anomalies. Concevoir des tableaux de bord pour le suivi des KPI opérationnels et métier. 🔹 Infrastructure as Code (IaC) Contribuer à la définition et à l'implémentation de l'infrastructure data via Terraform. Garantir la reproductibilité et la traçabilité des environnements (Dev, Recette, Pré-prod, Prod). 🔹 Collaboration et conseil Travailler en étroite collaboration avec les équipes Data (Data Scientists, Data Analysts), les Product Owners et les métiers. Proposer des solutions techniques adaptées et conseiller sur les bonnes pratiques en Data Engineering. Participer aux rituels Agile/Kanban de l'équipe produit. 5. Compétences et expériences requises5.1 Expertise technique Cloud GCP : Expertise confirmée des services data (BigQuery, Dataflow, Cloud Storage, Pub/Sub, Composer/Airflow, Stackdriver, Data Catalog). Bases de données : Maîtrise avancée SQL (optimisation, requêtes complexes), expérience sur BigQuery et Oracle 19 (MySQL/PostgreSQL appréciés). Scripting : Excellente maîtrise de Bash (indispensable pour le run). Systèmes : Bonne maîtrise des environnements Linux (RedHat). IaC : Solide expérience avec Terraform. CI/CD : Maîtrise d'un outil comme GitLab CI. Monitoring/Logging : Stackdriver, Grafana, ELK, Looker Studio. Versioning : Git (GitLab). Réseaux : Connaissances solides (TCP/IP, HTTP/S, DNS, load balancing, firewall). Data Engineering : Maîtrise des concepts ETL/ELT, Data Warehouse, Data Lake et streaming. 5.2 Environnement technique TOPASE NLS OS : RedHat Enterprise 9.4 Cloud : Azure (solution éditeur) & GCP (data, monitoring, pipelines) CI/CD : GitLab CI IaC : Terraform Monitoring : Looker Studio, GANTI, Grafana, ELK Bases : Oracle, BigQuery Langage : Bash 5.3 Méthodologies et soft skills Expérience en environnement Agile (Scrum, Kanban). Excellentes capacités d'analyse et de résolution de problèmes, notamment en situation d'incident. Autonomie, proactivité et sens de l'amélioration continue. Bonnes compétences de communication (français courant, anglais technique). Esprit d'équipe et partage des connaissances. Sens des responsabilités, notamment en environnement de production. 5.4 Expérience Minimum 3 ans d'expérience en tant que Data Engineer, idéalement sur GCP. Expérience sur des environnements à forte volumétrie, avec des enjeux de performance, fiabilité et disponibilité.

Basée à Lille, Lyon, Nantes, Grenoble, Marseille, Paris et Bruxelles, Insitoo Freelances est une société du groupe Insitoo, spécialisée dans le placement et le sourcing des Freelances IT et Métier. Depuis 2007, Insitoo Freelances a su s’imposer comme une référence en matière de freelancing par son expertise dans l’IT et ses valeurs de transparence et de proximité. Actuellement, afin de répondre aux besoins de nos clients, nous recherchons un Data Ingénieur H/F à Lille, France. Contexte : Au cours de sa mission, le consultant : - Participera aux rituels agiles de l'équipe, - Analysera les besoins des utilisateurs et proposera des solutions innovantes et en phase avec les drivers de l'entreprises, - Développera les solutions data (Alimentation, stockage, modélisation, restitution), - Validera la qualité des développements de son équipe, - Améliorera et optimisera le patrimoine actuel de son équipe, - Maintiendra les solutions existantes (Run), - Contribuera à la construction du nouveau socle et des services sur la plateforme Google Cloud, - Accompagnera et acculturera les métiers sur les bonnes pratiques de l'exploitation de la Data Les missions attendues par le Data Ingénieur H/F : Il est garant de l'accès qualitatif aux sources de données. Il s'assure de la maîtrise de la donnée et est garant de la qualité de son utilisation (référencement, normalisation, et qualification) afin d'en faciliter l'exploitation par les équipes (Data Analysts et Data Scientists). Il contribue également à la définition de la politique de la donnée et à la structuration de son cycle de vie dans le respect des réglementations en vigueur, en collaboration avec le Chief Data Officer. Son périmètre d'intervention est axé sur les systèmes applicatifs autour de la gestion de la donnée et du traitement, et sur les plateformes Big Data, IoT, Il assure la supervision et l'intégration des données de diverse nature qui proviennent de ces sources multiples et vérifie la qualité des données qui entrent dans le Data Lake (il recette de la donnée, supprime les doublons, ). SON ACTIVITE : Capte les données (structurées et non structurées) produites dans les différentes applications ou à l'extérieur de l'entité Intègre les éléments Structure la donnée (sémantique, etc.) Cartographie les éléments à disposition Nettoie la donnée (élimination des doublons, ) Valide la donnée Éventuellement, il crée le référentiel de données SES LIVRABLES : Data Lake approprié et partagé et son dimensionnement Cartographie des données Les éléments permettant de garantir la qualité de la donnée