Envie d'un nouveau challenge... CELAD vous attend ! Nous poursuivons notre développement et recherchons actuellement un(e) Expert Stockage S3 / Architecte Infrastructure H/F pour intervenir chez un de nos clients. Contexte : Dans le cadre du déploiement d'une solution de détection et de réponse aux menaces (XDR) en version self-hosted, vous interviendrez sur la conception d'une architecture de stockage S3 adaptée aux besoins d'une infrastructure existante. L'objectif : étudier les ressources matérielles disponibles dans les datacenters et proposer une solution de stockage d'environ 500 To, en privilégiant le réemploi des serveurs existants lorsque cela est pertinent. Votre expertise permettra également d'évaluer les coûts de mise en œuvre et de maintien en conditions opérationnelles (MCO) de la solution envisagée. Votre mission : Au sein de l'équipe, vous interviendrez sur les activités suivantes : - Analyser l'infrastructure existante et étudier les serveurs disponibles afin d'identifier les ressources pouvant être réemployées. - Concevoir une architecture de stockage S3 capable de répondre à un besoin d'environ 500 To, en tenant compte des contraintes matérielles et des besoins de la solution XDR. - Étudier les solutions open source adaptées à la mise en place d'un cluster de stockage S3. - Proposer un design d'architecture précisant les choix matériels et logiciels retenus. - Évaluer les coûts de la solution proposée, en intégrant le build ainsi que les coûts de maintien en conditions opérationnelles (MCO).
Vous avez déjà déployé et exploité des solutions de stockage objet S3 on-premise à grande échelle, au-delà du pétaoctet, avec des technologies comme MinIO/AIStor, Scality, Ceph ou Garage. Vous maîtrisez l'administration Linux avancée et les sous-systèmes de stockage (LVM, dm-crypt, iSCSI), ainsi que le réseau Linux : TCP/IP, VLAN, load balancers et firewall. Vous automatisez naturellement vos tâches avec Ansible, Python et AWX/Tower. MissionsMener les PoC des solutions de stockage et de données haute performance. Participer au design de l'architecture : stockage objet S3, système, réseau. Faire le setup (déploiement) des plateformes on-premise. Faire le tuning et l'optimisation des performances sur de très grosses volumétries. Piloter des sous-projets en autonomie, avec plusieurs interlocuteurs dans un environnement aux responsabilités partagées. Participer si besoin à des PoC sur GCP.
Recherche : Data Engineer. Mission longue, localisation : Lille (hybride). Dans ce rôle, vous implémenterez des solutions à partir des règles fonctionnelles établies par le Product Manager / Data Owner. Vous documenterez les règles de qualité décrites dans Collibra pour valider les datasets. Vous partirez des templates génériques pour construire des pipelines scalables de données structurées et transformerez la stack legacy vers la nouvelle stack recommandée par les équipes de la Data Platform. Vous répondrez aux questions des utilisateurs ainsi qu'à l'équipe de datavisualisation sur les données mises à disposition, serez capable d'intervenir sur l'ensemble des flux de l'équipe, documenterez les flux implémentés et contribuerez à l'amélioration des bonnes pratiques de développement au sein de l'équipe (Mob programming, Test Driven Development, ...). Vous contribuerez également à la communauté de data engineers. Abonnez-vous à la page NaxoTech sur LinkedIn pour découvrir nos offres régulières
Pour un acteur international de la gestion d'actifs, nous recherchons un Chef de projet MOE senior spécialisé en données de référence, pour renforcer son dispositif Data. Vous rejoindrez l'équipe qui gère plusieurs applications de Master Data Management. Ces applications alimentent et diffusent les référentiels financiers du groupe. L'enjeu principal est de connecter la plateforme de référentiels à des environnements data modernes (Snowflake, Databricks, S3, API) et de réduire les dépendances entre les applications. Le contexte est international. Vos missions Piloter et coordonner les projets qui touchent le périmètre MDM Contribuer à la conception des solutions de distribution et de partage de données Analyser les besoins métier, réaliser des études de faisabilité et proposer des simplifications Rédiger les spécifications fonctionnelles et les documents de conception, et chiffrer les charges Coordonner les équipes, suivre les plannings, organiser et animer les COPROJ et COPIL Participer à la maintenance corrective et évolutive, aux recettes et aux mises en production Produire les tableaux de bord de pilotage et de qualité Assurer le support aux utilisateurs et une veille sur les données d'actifs financiers
Un/une Technical Program Manager (TPM) est recherché(e) pour une mission longue basée à Lille (hybride). Le/la candidat(e) aura pour responsabilités d'aligner les contraintes des différentes équipes, d'orchestrer des chantiers d'infrastructure clés et de mettre en application les principes de gouvernance de la plateforme Data. La mission s'inscrit dans une transformation majeure du socle Datalake visant la modernisation de la gouvernance et des services Cloud (transition des services legacy d'ingestion et de traitement, ex. AWS Glue, vers un modèle de gouvernance unifié comme Unity Catalog), la rationalisation et le décommissionnement des espaces de stockage historiques (buckets S3 legacy) et l'accompagnement de la conduite du changement. Le/la TPM pilotera la feuille de route stratégique, fluidifiera la relation avec les experts techniques de l'équipe Datalake, animera la communauté des utilisateurs métiers et tech, et veillera au respect des échéances de fin de vie (EOL). Livrables attendus : audit d'usage et cartographie des dépendances, roadmap de migration et de décommissionnement, tableaux de bord de suivi, base de connaissances centralisée, kit de formation, plan de communication et animation récurrente des communautés (Office Hours, ateliers). Abonnez-vous à la page NaxoTech sur LinkedIn pour découvrir nos offres régulières
Contexte de la mission : Le consultant intégrera l'équipe Data & AI Procurement, dont la principale mission est d'ingérer, centraliser et transformer les données issues de différents systèmes afin de répondre à différents usages métiers : # Self-service BI — mise à disposition de données exploitables en autonomie par les équipes métier ; # Dashboards Tableau — visualisation et pilotage de la performance achats # Reporting — production de rapports structurés ; # Applications Data — développement de solutions applicatives orientées usage métier Description de la mission : L'équipe Data & AI Procurement poursuit la construction et le maintien de sa Data Foundation. Ce socle repose sur une plateforme data composée : DataHub (outil interne) pour la récupération des sources de données, Snowflake comme entrepôt de données, DBT pour la modélisation et les transformations, et Airflow pour l'orchestration des pipelines. Dans le cadre d'un remplacement, nous recherchons un Data Engineer qui interviendra exclusivement sur la partie Data Foundation, et plus précisément sur la création de nouvelles pipelines et la maintenance des pipelines existantes. Le consultant prendra en charge ces pipelines de bout en bout : de la récupération des données sources via DataHub jusqu'à leur mise à disposition — ingérée dans Snowflake, modélisée et testée — pour les usages métiers. Le consultant évoluera au sein de l'équipe Data Foundation et travaillera en étroite collaboration avec : - Business Data Analysts : Expression et Cadrage des besoins de données, compréhension des usages métiers. - Data Engineers de l'équipe Data Foundation : conception, développement et maintenance des pipelines, partage des bonnes pratiques.
Dans le cadre de la modernisation d'une plateforme décisionnelle au sein d'un acteur de l'épargne salariale et de la retraite, nous recherchons un Data Engineer / Data Architect Senior. La mission s'inscrit dans un programme de transformation visant à faire évoluer une plateforme BI existante vers une architecture moderne de type Lakehouse, tout en garantissant la continuité des services actuellement proposés. Vous rejoindrez l'équipe Cœur-Data, composée de cinq personnes, et travaillerez en étroite collaboration avec les équipes métier, la MOA et les équipes techniques transverses. Objectifs de la missionL'objectif principal sera de concevoir et mettre à disposition des données structurées, fiables et exploitables par l'équipe Marketing. Vous interviendrez notamment sur : La définition de l'architecture et de l'organisation du Lakehouse ; La conception de solutions de collecte, de stockage et de transformation des données ; La migration et la modernisation progressive des traitements existants ; L'industrialisation et le suivi des pipelines de données ; La mise à disposition de données brutes et transformées pour les usages analytiques et la datavisualisation. Principales responsabilitésEn tant que Data Engineer / Data Architect Senior, vous serez amené à : Concevoir l'organisation des données et des flux au sein d'un environnement Lakehouse basé sur S3 ; Développer des pipelines de traitement avec Python, Spark et PySpark ; Mettre en place et maintenir les traitements d'ingestion et de transformation ; Participer à l'ordonnancement des traitements avec Dagster ; Contribuer à l'exposition des données via Trino et les outils de datavisualisation ; Développer les solutions de collecte et de stockage répondant aux besoins métiers ; Mettre en place les tests unitaires et les contrôles nécessaires à la qualité des développements ; Assurer le suivi des traitements et identifier les éventuels incidents ou blocages ; Rédiger et maintenir la documentation technique ; Participer à la recette avec la MOA et les utilisateurs ; Estimer les charges et contribuer au suivi de l'avancement du projet ; Réaliser des études en collaboration avec les équipes transverses ; Participer à l'amélioration continue des processus de développement et d'exploitation. Environnement techniquePlateforme ciblePython ; Apache Spark / PySpark ; SQL ; Amazon S3 ; Dagster ; Trino ; Git ; Jenkins. Environnement existantInformatica ; DAC ; Oracle 19 ; Outils BI et de reporting. Outils projetJira ; Confluence ; Windows 10 avec WSL.
Vous intervenez au sein d'une Squad technique dont l'objectif est de concevoir, déployer et mettre en place des outils innovants en Data Science, MLOps et Intelligence Artificielle (IA) avancée. Cette Squad fournie également les socles applicatifs nécessaires, afin de permettre aux utilisateurs finaux de développer et exploiter des cas d'usage métiers Data avancé et IA. • Modernisation de l'offre Data Science & MLOPS actuelle (plateforme BigData, outils MLOPS Open source, ... ) • Cadrage et construction d'une plateforme Studio IA cible • Evolution du portail (WEB) de service Data et IA : intégration de nouvelles offres / fonctionnalités Taches : • Participe à la construction et au maintien de solutions IT évolutives, modulaires, innovantes, cohérentes avec leur écosystème et répondant au besoin métier. • Décline le cadre d'Architecture d'Entreprise(processus, normes, patterns …) et contribue à son évolution • Facilite la prise de décision de manière collaborative sur la meilleure architecture (conformité, sécurité, risques...), avec un juste équilibre entre le respect de la cible d'entreprise et la réponse pragmatique au besoin • Maitrise les objectifs visés par le cadre d'Architecture d'Entreprise et décrit des solutions qui s'y conforment et sont implémentables sous forme incrémentale dans les sprints • Participe à l'exploration continue (étude d'opportunité, cadrage) et aide à estimer l'effort et la valeur délivrée par les choix de designs éligibles pour favoriser la priorisation par le Product Owner et le Pôle Utilisateur (évolutivité, testabilité, déployabilité...) • Établir les priorités des tâches en fonction des besoins du projet et des objectifs stratégiques. • Évaluer et adopter de nouvelles technologies et méthodologies pour améliorer les processus MLOps, IA / LLMOPS et l'efficacité de l'équipe. • Suit et facilite la visibilité de la conformité des solutions de son périmètre par rapport à la stratégie d'entreprise • Responsable de la documentation produits en veillant à sa pertinence, fiabilité et sa cohérence avec les cadres de référence de l'architecture (processus, guides, patterns...) • Accompagner, superviser et encadrer une équipe technique, en fournissant une orientation technique, en fixant des objectifs et en assurant la montée en compétence des équipes internes
RECHERCHE – DATA PLATFORM ENGINEER AWS / DATA & IA Je recherche un Data Platform Engineer expérimenté pour accompagner les équipes projets dans l'adoption, l'utilisation et l'industrialisation d'une plateforme Data & IA basée sur AWS, notamment autour de Amazon SageMaker Unified Studio. Le consultant interviendra comme référent technique de la plateforme, en lien étroit avec les équipes Data Engineering, Data Science, BI, Architecture, Sécurité et métiers. 🔹 Expérience : Confirmée en Data Platform / Cloud AWS 🔹 Environnement : AWS / Data & IA 🔹 Démarrage : ASAP 🔹 Mission longue durée 🔹 Anglais : courant 🛠️ Compétences indispensables : ☁️ AWS / Data Platform : • Excellente maîtrise des services AWS orientés Data & Analytics • Expérience significative sur des plateformes Data Lake / Lakehouse • AWS Glue • Amazon SageMaker Unified Studio • Amazon Redshift • Amazon S3 • AWS Lake Formation • Intégration, catalogage et partage des données 🏗️ Infrastructure & DevOps : • Terraform / Terragrunt • CI/CD • GitLab / Jenkins • Industrialisation et automatisation des environnements 🔐 Gouvernance & sécurité : • Gouvernance et qualité des données • Gestion des accès et politiques de sécurité • Publication et consommation des actifs Data • Partage et valorisation des données 🎯 Missions principales : • Accompagner les projets dans leur intégration à la plateforme Data AWS • Participer au cadrage et à la conception des solutions Data & IA • Conseiller les équipes sur les bonnes pratiques AWS et SageMaker Unified Studio • Administrer et faire évoluer les environnements de la plateforme • Assurer la disponibilité, la performance et la fiabilité des services • Accompagner les équipes dans la résolution des problématiques techniques • Assurer un support de niveau expert et analyser les incidents • Participer à la mise en œuvre de nouveaux cas d'usage Data, Analytics et IA • Animer des ateliers techniques et produire la documentation associée ⭐ Soft Skills recherchés : • Très bonne capacité à communiquer avec des interlocuteurs techniques et métiers • Capacité à vulgariser des sujets techniques complexes • Esprit d'équipe et sens du service • Autonomie et force de proposition • Capacité à transformer les besoins métiers en solutions techniques Cordialement
Pour notre client, un grand groupe international du secteur de la certification et du TIC, nous recherchons un Data Platform Engineer AWS qui rejoindra l'équipe Architecture & Delivery de sa DSI (environ 10 personnes) à La Défense. Le client industrialise sa plateforme Data & IA sur AWS, avec Amazon SageMaker Unified Studio comme socle. Vous en serez le référent technique : vous accompagnez les équipes projets dans l'adoption, l'utilisation et l'industrialisation des services de la plateforme, et vous garantissez le respect des standards d'architecture, de gouvernance et de sécurité. Vous travaillez en étroite collaboration avec les équipes Data Engineering, Data Science, Business Intelligence, Architecture, Sécurité et les équipes métiers. Support aux projets Data & IA : Accompagner les projets dans leur intégration à la plateforme Data AWS Intervenir dans les phases de cadrage et de conception des solutions Data & IA Conseiller les équipes sur les bonnes pratiques AWS et SageMaker Unified Studio Identifier les architectures les plus adaptées aux besoins métiers Assister les équipes projets dans la résolution des problématiques techniques liées aux données Contribuer à la mise en oeuvre de nouveaux cas d'usage analytiques, décisionnels et IA Gestion et évolution de la plateforme : Administrer et maintenir les environnements SageMaker Unified Studio Assurer la disponibilité, la performance et la fiabilité des services Participer à l'évolution de l'architecture selon les nouveaux besoins Contribuer à l'introduction de nouveaux services AWS et de nouvelles capacités Data & AI Suivre la consommation des services et proposer des optimisations techniques Gouvernance et partage des données : Accompagner les équipes dans la publication et la consommation des actifs de données Participer à la mise en oeuvre des règles de gouvernance et de qualité des données Veiller au respect des standards de sécurité et des politiques d'accès Faciliter le partage et la valorisation des données entre les entités Support opérationnel et expertise : Assurer le support de niveau expert sur les composants de la plateforme Analyser les incidents et proposer les actions correctives Accompagner les utilisateurs dans la prise en main des services Produire et maintenir la documentation technique et les guides de bonnes pratiques Animer des ateliers techniques avec les équipes projets et les parties prenantes
CONTEXTE Dans le cadre d'un environnement international de trading d'énergie, nous recherchons un Data Engineer Expert pour rejoindre une équipe Data Engineering basée à Genève. Vous interviendrez sur des enjeux data critiques pour les activités de trading de pétrole, biofuels, gaz naturel et électricité, dans un environnement à forte volumétrie et nécessitant un haut niveau de performance et de fiabilité. Vous collaborerez au quotidien avec les traders, charterers, opérateurs, analystes de marché et quants, ainsi qu'avec des équipes internationales basées notamment à Paris, Houston et Singapour. RESPONSABILITÉS Concevoir, maintenir et optimiser des pipelines de données batch et temps réel. Développer des solutions de streaming data à haute performance. Travailler sur des architectures Databricks / Spark Streaming / Structured Streaming / Delta Lake. Concevoir et exploiter des flux temps réel avec Kafka et/ou AWS Kinesis. Développer des pipelines et APIs en Python. Exploiter les services AWS : Kinesis, SQS, SNS, EventBridge, S3, Lambda, IAM. Garantir la disponibilité, l'intégrité, la qualité et la performance des données. Identifier et réduire les problèmes de latence, incidents et défaillances sur les flux temps réel. Participer à l'amélioration continue des pratiques de monitoring, CI/CD et observabilité. Collaborer avec les équipes métier et techniques dans un contexte international et exigeant. ENVIRONNEMENT TECHNIQUE Databricks · Spark · Structured Streaming · Delta Lake · Python · AWS · Kinesis · Kafka · S3 · Lambda · SQS · SNS · EventBridge · IAM · PySpark · Git · GitHub Actions · CloudWatch · Grafana
Nous recherchons actuellement un(e) Data Engineer Senior pour accompagner une équipe Data sur des sujets à forts enjeux autour de la Data Engineering, du Big Data et des architectures Lakehouse. 🔎 1 Data Engineer Senior 🎯 Missions principales : · Concevoir, développer et optimiser des pipelines de données à grande échelle · Mettre en œuvre des flux batch, streaming et ingestion via API · Structurer les transformations selon le modèle Médaillon (Bronze / Silver / Gold) · Développer et industrialiser les pipelines avec DBT, Spark et Iceberg · Contribuer à l'évolution et à l'optimisation de l'architecture Lakehouse · Déployer et maintenir les pipelines dans un environnement Cloud AWS · Orchestrer les workflows ETL / ELT avec Airflow · Mettre en œuvre l'Infrastructure as Code avec Terraform · Travailler sur des environnements conteneurisés avec Docker / Kubernetes · Garantir la disponibilité, la supervision et l'observabilité des traitements · Participer à la gestion des incidents et à l'amélioration continue · Définir et mettre en œuvre les règles de qualité des données : tests, validations et contrôles automatisés · Documenter les architectures, pipelines et règles métier · Garantir la conformité des flux, notamment dans le respect des exigences RGPD ⚙️ Environnement technique : · DBT / Data Catalog · Apache Spark · Apache Iceberg · AWS : Glue, EMR, S3… · Terraform · Airflow · Python · Trino / Starburst · Datadog · Docker / Kubernetes · Architectures Big Data / Lakehouse · Modélisation et collecte de données 🧑💻 Profil recherché : · Minimum 8 ans d'expérience en Data Engineering · Expertise confirmée des architectures Big Data et Lakehouse · Très bonne maîtrise de DBT, Spark, Iceberg, AWS et Terraform · Solide expérience sur les services AWS, notamment Glue, EMR et S3 · Connaissance de Trino / Starburst et Datadog · Bon niveau en Python · Forte capacité d'analyse et de compréhension des enjeux métiers · Expérience dans l'accompagnement et l'encadrement de profils juniors · Autonomie, rigueur et forte culture de l'amélioration continue 🌍 Contexte : · Environnement Data à grande échelle · Projets autour de la modernisation et de l'industrialisation des plateformes Data · Forts enjeux Lakehouse, Data Quality, Observabilité et Cloud · Collaboration avec des équipes Data, IT et métiers 📍 Localisation : Île-de-France – Hybride 🏠 Télétravail : 3 jours par semaine 📅 Démarrage : fin août 2026 💼 Mission longue durée Si vous êtes intéressé(e) ou connaissez un(e) Data Engineer Senior correspondant à ce profil, n'hésitez pas à me contacter en MP ou directement par téléphone. Cordialement,
Nous recherchons un Expert Stockage & Sauvegarde pour accompagner nos équipes sur les infrastructures de stockage bloc et les stratégies de protection des données. Vous interviendrez sur la conception et l'évolution des architectures de stockage, participerez aux choix technologiques structurants et réaliserez des études de dimensionnement adaptées aux besoins métier. Vous construirez les architectures cibles et accompagnerez la transition vers des architectures de stockage objet (S3), en lien avec les enjeux de scalabilité et de coût. Une dimension avant-vente est associée au poste : vous serez amené à accompagner les équipes commerciales sur des sujets techniques stockage et sauvegarde, en apportant votre expertise lors d'échanges clients ou de phases de qualification de besoin. Le poste demande une forte culture infrastructure, une bonne connaissance des enjeux de protection des données (PRA/PCA) et un réel intérêt pour les évolutions technologiques du stockage.
Contexte Dans le cadre de l'exploitation et de l'évolution d'infrastructures critiques, nous recherchons un·e Expert·e Stockage spécialisé·e NetApp ONTAP. Intégré·e à une équipe technique, vous intervenez sur l'ensemble du cycle de vie des infrastructures : architecture, Build, Run, MCO/MCS et support N3. Missions Concevoir et faire évoluer les architectures de stockage NetApp. Administrer les clusters ONTAP, FAS, AFF, HA Pair et Shelves. Réaliser les upgrades et migrations de plateformes. Intervenir sur les environnements SAN, NAS, NFS, SMB, S3, FC et NVMe. Assurer le support expert N3 et la résolution d'incidents complexes. Participer à la sécurisation et à la gestion de l'obsolescence. Contribuer aux activités de sauvegarde Veritas NetBackup. Produire la documentation technique et d'architecture. Participer aux projets en Agile Scrum.
