Nous recherchons pour l'un de nos clients un Data Engineer Databricks & DBT sénior (H/F) Dans le cadre du développement de notre plateforme Data, nous recherchons un(e) Data Engineer passionné(e) par les technologies Cloud et les architectures modernes de traitement de données. Vous rejoindrez une équipe Data dynamique afin de concevoir, développer et optimiser des pipelines de données robustes, scalables et performants, en vous appuyant sur Databricks, dbt et les meilleures pratiques d'ingénierie Data. Vos missions Concevoir, développer et maintenir des pipelines de données fiables et performants. Développer des transformations de données avec dbt. Concevoir et optimiser des traitements de données sur Databricks (Spark/PySpark). Participer à la modélisation des données (Data Warehouse, Data Lakehouse). Mettre en œuvre les bonnes pratiques de qualité, de tests et de documentation. Industrialiser les traitements via des pipelines CI/CD. Collaborer avec les équipes Data Analysts, Data Scientists et métiers. Participer à l'amélioration continue de la plateforme Data.
Développement, tests, intégration et configuration sur les environnements développement, test et production AWS / Databricks • Administration et MCO des plateformes Data • Développement, évolution, robustification et simplification des briques du socle • Intégration de nouvelles applications, notamment SaaS • Gestion de la sécurité, des secrets, des accès et matrices de droits • Amélioration continue du monitoring et mise en place de monitors • Enrichissement des normes d'exploitation • Gestion des incidents et problèmes selon les processus ITIL • Support technique N2/N3 • Revues de code et amélioration des tests d'intégration continue • Validation des merge requests • Mise à jour de la documentation • Diffusion des bonnes pratiques DevOps • Participation aux rituels Agile Scrum • Contribution aux sujets FinOps : surveillance, analyse et optimisation des coûts du socle
Contexte du poste : Nous recherchons un Architecte Solution Databricks pour intégrer l'équipe Socle de la Plateforme Data Groupe de notre client. Au sein de la Data Factory, vous accompagnerez les squads métiers dans la conception, le développement et la mise en production de leurs solutions Data. Vous interviendrez sur une plateforme stratégique reposant notamment sur AWS, Databricks, Power BI, GitLab CI/CD et Okta, dans un environnement Data Mesh et self-service Data. Missions principales : Accompagner les squads projets dès le cadrage jusqu'à la mise en production de leurs solutions Data Challenger les choix techniques et architecturaux et accompagner les Tech Leads dans la conception des solutions Garantir l'application des bonnes pratiques de développement, d'architecture, de performance, de FinOps et d'éco-conception Participer à la conception et à l'évolution des briques du socle Data et contribuer à des POC et études techniques Superviser les activités d'ingestion, d'exposition et de gouvernance des données Participer aux phases de VSR, au support N3, au MCO et à l'analyse des incidents en production Accompagner les équipes à travers des onboardings, formations, démonstrations techniques et retours d'expérience Garantir la qualité des livrables techniques et documentaires : DAT, contrats d'interface, cahiers de tests, dossiers d'exploitation, etc.
Positionné au sein de la DSI de l'entreprise, le Data Engineer intègrera l'équipe Conso Data qui traite les données de consommation des clients afin de les exposer sur les canaux digitaux. Il devra : - Être force de proposition et participer à la conception des solutions techniques en collaboration avec les membres de l'équipe. - Comprendre les enjeux métiers afin de concevoir des solutions répondant aux besoins fonctionnels. - Participer aux cérémonies Agile SAFe (PI Planning, macro-chiffrage, refinements, rétrospectives, etc.). - Concevoir et faire évoluer les architectures de données basées sur l'approche Databricks Medallion Architecture (Bronze, Silver, Gold). - Garantir la qualité, la fiabilité et la performance des traitements de données en production. (Jobs Databricks et APIs) - Contribuer à l'amélioration continue de la plateforme en proposant des optimisations techniques, des bonnes pratiques et des innovations. Il sera notamment amené à : - Concevoir, développer et maintenir des pipelines de données (ETL) pour les flux d'intégration et les flux métiers. - Mettre en œuvre et orchestrer les traitements de données à l'aide des outils Databricks. - Modéliser les données dans les tables Delta Lake en appliquant les bonnes pratiques de partitionnement, indexation, optimisation et gouvernance. - Optimiser les performances des traitements Databricks (Spark, Delta Lake, gestion des coûts et du temps d'exécution). - Assurer le développement, les tests et le déploiement des composants techniques via des processus CI/CD. - Concevoir, développer et maintenir des APIs permettant l'exposition et la consommation des données. - Mettre en place des mécanismes de contrôle qualité des données (Data Quality), de monitoring et d'alerting. - Identifier, analyser et résoudre les incidents de production tout en assurant le suivi des actions correctives. - Rédiger et maintenir la documentation technique des solutions mises en œuvre. - Accompagner les équipes dans l'adoption des bonnes pratiques Data Engineering Environnement Technique : - Python, SQL - Spark, PySpark, DBUtils - FastApi, Pytest - Databricks, Unity Catalog - Ariflow (migration vers Databricks Workflow) - AWS (Lambda, secrect manager, Bucket S3, ECS) - Git et gestion du versioning - Déploiement pipeline CI/CD
Vous intégrerez l'équipe chargée de concevoir et de déployer des produits Analytics destinés aux fonctions support, aux équipes logistiques, aux magasins et aux consommateurs. Vous interviendrez sur le développement de cas d'usage BI, Analytics et Data Science sur la plateforme Data basée sur Microsoft Azure et Databricks. Votre rôle Conception et développement Data · Recueillir et analyser les besoins afin de définir les traitements de données à mettre en œuvre · Concevoir et développer des pipelines de données pour transformer, enrichir et traiter les données au sein du Data Lake · Développer des notebooks Databricks pour réaliser des traitements avancés de données · Mettre en œuvre et optimiser les traitements et les requêtes SQL dans un environnement Cloud Data Warehousing BI et qualité des développements · Concevoir et réaliser des tableaux de bord sous Power BI · Concevoir et exécuter les tests unitaires · Réaliser des revues de code afin de garantir la qualité et le respect des bonnes pratiques de développement · Assurer la QA et les tests des pipelines développés par un autre Data Engineer Industrialisation et documentation · Rédiger et maintenir la documentation technique : dossiers d'analyse technique, release delivery notes, etc. · Livrer les développements dans un environnement DevOps intégrant des processus CI/CD et les outils associés
Bonjour, Pour le compte de l'un de mes clients dans le secteur du luxe, je suis à recherche d'un Data App Engineer - Databricks / Python en Pré-embauche. Dans le cadre d'un départ à venir dans les équipes de la Data Factory, nous recherchons un(e) consultant(e) Data App Engineer confirmé, disposant d'une expertise avérée sur Databricks Apps, en modélisation data, et en réalisation d'interfaces. Le profil attendu est un data “full stack”, maîtrisant les concepts d'ingénierie, d'architecture et d'UX/UI, capable de concevoir, construire et maintenir des applications de collecte et de gestion de données, en interaction avec les chaînes analytiques. Le candidat devra être immédiatement opérationnel, justifier d'au moins 2 années d'expérience sur des projets Data App, et démontrer une excellente maîtrise de l'écosystème Databricks, ainsi que des frameworks orientés Data Apps (Dash et idéalement Node.js). Objectifs de la mission : Concevoir et développer des Data Apps, orientées saisie et gouvernance des données référentielles Garantir l'intégration fluide des applications avec les couches analytiques Modéliser des structures data robustes, performantes et sécurisées Industrialiser les flux et orchestrations nécessaires au cycle de vie des données Assurer un haut niveau de qualité UX/UI afin de favoriser l'adoption par les équipes métiers Mettre en place une démarche d'ingénierie pérenne : sécurité, logging, observabilité, CI/CD Périmètre d'intervention : Conception et développement d'applications Databricks Apps (front + logique métier + data pipelines) Création de modèles de données durables, optimisés et gouvernés sous Unity Catalog Mise en place et optimisation de la sécurité Lakehouse, notamment via RLS Conception des flux d'ingestion / exposition / synchronisation entre le Lakehouse (couche analytique) et Lakebase (couche applicative) : synced tables, CDF Développement Python avancé : data processing, API internes, logique applicative Participation aux rituels du delivery et contribution aux bonnes pratiques d'ingénierie Documentation des architectures, process et guidelines Support à l'intégration, aux tests et aux mises en production
Expérience5 ans minimum en Data Engineering 🚀 DémarrageDès que possible – au plus tard fin septembre 2026 🏠 Télétravail2 jours de télétravail / semaine 3 jours de présence obligatoire sur site / semaine 🎯 Contexte de la missionAu sein de la Direction des SI Mutualisés, l'équipe DataLab intervient sur les périmètres Data & Analytics dans le cadre du programme de transformation du SI du Groupement Les Mousquetaires. Le consultant intégrera la Data Factory, qui regroupe les équipes Data de la Stime et des métiers. Cette organisation a pour objectif de concevoir et déployer des produits Data, BI, Analytics et Data Science à destination des fonctions support, des équipes logistiques, des magasins et des consommateurs. Dans un contexte de passage à l'échelle et d'industrialisation des pratiques Data, vous rejoindrez une Squad Supply / Logistique, en charge du développement de cas d'usage BI, Analytics et Data Science sur une plateforme Data basée sur Microsoft Azure et Databricks. 🎯 Description de la missionNous recherchons un Data Engineer Confirmé / Senior, polyvalent et opérationnel, disposant d'une solide expertise sur : Azure Databricks Apache Spark Python SQL Le consultant devra également avoir une forte appétence pour l'analyse de données et être capable d'intervenir sur les activités de QA et de testing, afin de garantir la qualité et la fiabilité des livrables de la Squad. Une expérience sur Power BI ainsi qu'une première expérience dans un environnement Supply Chain / Logistique seront fortement appréciées. 🔧 Missions principalesRecueillir et analyser les besoins Data Réaliser des analyses de données Concevoir et développer des pipelines de données Transformer, enrichir et traiter les données au sein du Data Lake Développer des notebooks Databricks pour les traitements avancés Concevoir et optimiser les traitements Data Mettre en œuvre des solutions de Cloud Data Warehousing Optimiser les requêtes SQL et réaliser le tuning des traitements Rédiger la documentation technique : dossiers d'analyse technique, release delivery notes, etc. Participer aux revues de code Garantir l'application des bonnes pratiques de développement Concevoir et exécuter les tests unitaires Réaliser les activités de QA / testing des pipelines développés par les autres Data Engineers de la Squad Concevoir et maintenir des tableaux de bord Power BI Livrer les développements dans un environnement DevOps / CI-CD Participer à l'amélioration continue des pratiques Data Engineering 🧩 Compétences techniques requisesCompétenceExpérience minimaleExpérience Data Engineering5 ansAzure3 ansDatabricks3 ansSpark3 ansPython5 ansSQL5 ansCI/CD – Azure DevOps3 ansAgile / JIRA1 an ⭐ Compétences appréciéesPower BI Expérience Supply Chain / Logistique Data Lake / Cloud Data Warehouse Optimisation et performance des traitements Data QA / Data Quality / Testing Environnement Agile à l'échelle
ContexteDans le cadre du développement des usages autour de la donnée, vous intervenez sur l'intégration de nouvelles sources au sein du data warehouse et des datamarts, ainsi que sur l'alimentation des outils de restitution, notamment Qlik Sense. Missions principalesAu sein de l'équipe data, vous prenez en charge le pilotage de projets liés à l'alimentation et à la valorisation des données. À ce titre, vous : Pilotez les projets d'intégration de données (portails, flux téléphonie, etc.) dans le data warehouse Supervisez l'ensemble du cycle projet, depuis le recueil des besoins jusqu'à la mise en production et au suivi des livrables Organisez et animez les différents points de suivi (comités projet, comités de pilotage…) Coordonnez les travaux de l'équipe de développement Participez à la formalisation des besoins et à la rédaction des spécifications fonctionnelles et techniques Gérez les demandes d'évolution et les anomalies : suivi, analyse, arbitrage et priorisation Prenez en charge certaines demandes en direct lorsque nécessaire Préparez et exécutez les campagnes de tests (techniques et fonctionnels) Profil recherché Environnement techniqueBases de données : SQL Modélisation : Merise Outils BI : Qlik Sense Plateforme Data : Synapse Outils de suivi : Jira (ou équivalent) Outils de tests : Squash (ou équivalent)
- Gestion des travaux de gouvernance sur les domaines de données des mesures d'énergie, relations contractuelles, et points de consommation - Catalogage de données sous Collibra avec les Data Owner : définitions des objets, processus métier, règles de qualité de données, data lineage - Analyse de données et mise en oeuvre d'actions de correction : correctifs ponctuels, en masse, ou évolution du SI - Mise en oeuvre de Key Quality Indicators (KQI) pour la surveillance des anomalies de données et des effets des actions de correction - Réalisation des études d'impacts Data
Contexte : Dans le cadre de l'évolution d'une plateforme Data Groupe d'un acteur majeur du secteur des transports, nous recherchons un Architecte Solution / Tech Lead Databricks. Vous interviendrez au sein de l'équipe en charge de la plateforme Data afin d'accompagner plusieurs squads métiers dans la conception, l'industrialisation et la mise en production de leurs cas d'usage Data. Vous jouerez un rôle clé de référent technique, en accompagnant les équipes sur les choix d'architecture, les bonnes pratiques et la gouvernance de la plateforme. Vos missions : Participer au cadrage des projets Data et Big Data. Définir et valider les architectures techniques. Accompagner les Tech Leads et les équipes de développement. Concevoir des solutions basées sur Databricks. Participer aux revues d'architecture et aux arbitrages techniques. Rédiger la documentation d'architecture (DAT, HLD, DEX, dossiers techniques…). Accompagner les mises en production et les passages en exploitation. Participer à l'amélioration continue de la plateforme Data. Promouvoir les bonnes pratiques de développement, de sécurité, de gouvernance et de FinOps. Intervenir ponctuellement en support expert (N3). Former et accompagner les équipes projets. Environnement technique : Cloud : AWS Data Platform : Databricks Big Data : Spark, Scala, Python Data Lake / Lakehouse Power BI CI/CD : GitLab CI Infrastructure as Code : Terraform Conteneurisation : Docker, Kubernetes Sécurité & IAM Agile Scrum
Data Engineers Databricks, PySpark, Python, SQL, Gitlab, Nexus, Terraform Nantes ( 3 à 4 jours de télétravail) 05/10/2026 Databricks, PySpark, Python, SQL, Gitlab, Nexus, Terraform Nous recherchons 2 data Engineers confirmés qui travailleront sur des cas d'usage. Les principales tâches seront: - Participer à la conception des usages suivant l'architecture définie. - Réaliser les développements en langage python/spark, - Être vigilant sur les bonnes pratiques du point de vue FINOPS - Réaliser les travaux jusqu'en environnement de production - Participer au support N3 de la production - Être force de proposition, - Documenter les réalisations. Il est nécessaire de maitriser Databricks, Python, PySpark
En quelques motsCherry Pick est à la recherche d'un "Data Engineer Databricks (H/F) " pour un client dans le secteur du Retail Description🏢 Le Contexte : Passer à l'Échelle la Data Factory Supply ChainAu sein de la filiale informatique d'un groupe majeur de la grande distribution, la Data Factory réunit les équipes IT et les directions métiers pour concevoir, développer et déployer des produits analytiques et Data Science à forte valeur ajoutée. Afin de répondre à une demande croissante, l'organisation s'industrialise et adopte un modèle Agile à l'échelle (Domaines, Tribus, Squads). Vous intégrerez la squad Supply / Logistique, responsable de la création de cas d'usage stratégiques dédiés à l'optimisation des flux, à la gestion des entrepôts et à la performance logistique. Nous recherchons un(e) Data Engineer Confirmé / Senior évoluant sur une plateforme Cloud Azure / Databricks. Ce poste exige une réelle polyvalence : au-delà de la construction des pipelines de données, vous serez le garant de la qualité (QA/Testing) et participerez activement à la restitution décisionnelle. 🎯 Vos Missions : Pipelines, Data Warehouse, QA & RestitutionRattaché(e) à la squad Supply Chain, vos activités couvrent tout le cycle de vie de la donnée : 1. Data Engineering & Cloud Architecture (Majeure) : Concevoir et construire de manière industrielle les pipelines de données (ETL/ELT) pour transformer, enrichir et ingérer les données dans le Data Lake. Développer des notebooks Databricks (Spark / Python) pour assurer des traitements massifs complexes. Mettre en œuvre et optimiser les solutions de Cloud Data Warehousing (tuning de requêtes SQL, modélisation de tables). Assurer la livraison continue des développements dans un environnement DevOps intégrant les processus CI/CD (Azure DevOps). 2. QA, Testing & Qualité de Code : Assurer la QA et le testing des pipelines développés par le second Data Engineer de la squad. Concevoir et exécuter les tests unitaires, d'intégration et de non-régression. Réaliser des revues de code rigoureuses pour garantir le respect des bonnes pratiques et des standards d'ingénierie. 3. Data Analyse & Restitution Decisionnelle : Participer au recueil des besoins métiers et mener les analyses de données en amont. Concevoir et développer les tableaux de bord sous Power BI pour restituer les indicateurs Supply Chain aux opérationnels. Rédiger la documentation technique (Dossiers d'Analyse Technique, release notes).
Astrelya est un cabinet de conseil franco/suisse, en très forte croissance depuis sa création en 2017, spécialisé dans la transformation digitale, l'excellence opérationnelle et l'innovation technologique. Il est composé de 300 expert passionnés. Le cabinet accompagne ses clients sur l'ensemble du cycle de transformation, depuis la phase de cadrage jusqu'à la mise en œuvre opérationnelle, avec une expertise forte en Data/IA, Cloud, DevOps et méthodes agiles. Astrelya se distingue par un modèle fondé sur la proximité, la confiance et une culture humaine forte, qui place les collaborateurs au cœur de la création de valeur. Dans le cadre de notre développement, nous recherchons un Data Engineer – Plateforme Data B2C AWS / Databricks Contexte Vous rejoignez un programme stratégique de refonte d'une plateforme B2C à l'échelle mondiale, dans un environnement Agile Scrum. Description du poste En tant que Data Engineer, vous jouez un rôle clé dans la conception, le développement et l'évolution de la plateforme Data. Vous intervenez à la fois comme leader technique et acteur opérationnel avec pour objectif de garantir la qualité, la performance, la fiabilité et la maîtrise des coûts de la plateforme, tout en contribuant à la valorisation des données. Responsabilités principales Concevoir et développer des architectures Data cloud-native sur AWS, basées sur Databricks Garantir la qualité, la cohérence et la fiabilité des données tout au long de leur cycle de vie. Participer activement au développement conception et développement de pipelines Data ; traitements batch et streaming ; optimisation des performances. Définir, mettre en œuvre et promouvoir les bonnes pratiques de Data Engineering Mettre en place des mécanismes de monitoring et de contrôle de la qualité des données Piloter l'optimisation des coûts AWS et Databricks liés aux traitements Data dans une démarche FinOps. Accompagner les Data Engineers et développeurs Collaborer étroitement avec les équipes Produit et IT, dans un environnement international et multiculturel. Stack technique Data & Cloud Databricks AWS : S3, EC2, RDS, Lambda Langages & Frameworks Java SQL Apache Spark DevOps & CI/CD GitHub Enterprise ArgoCD SonarQube Intégration & Services Kafka PostgreSQL Collaboration & Agile Jira Confluence Agile Scrum Soft Skills Leadership technique : capacité à guider, structurer et faire grandir une équipe Data. Vision transverse : compréhension des enjeux métiers, Data et Cloud, et capacité à les mettre en perspective. Communication : aptitude à vulgariser des concepts techniques et à communiquer efficacement avec différents interlocuteurs. Esprit collaboratif et interculturel : capacité à travailler efficacement avec des équipes internationales. Proactivité et adaptabilité : capacité à anticiper les risques liés à la qualité, aux coûts et aux performances, et à évoluer dans un contexte Agile.
At CGI, we're helping to transform the future of healthcare through the power of data. As a Senior Data Engineer, you'll play a pivotal role in designing, building, and optimising data platforms that underpin critical national services. Working at the heart of our Healthcare team, you'll use your expertise in AWS, Databricks, and Python to deliver high-impact solutions that improve outcomes, enhance decision-making, and drive innovation across the sector. You'll collaborate with experts who share your passion for problem-solving, ownership, and technical excellence—empowered to shape the data foundations of tomorrow. CGI was recognised in the Sunday Times Best Places to Work List 2025 and has been named a UK 'Best Employer' by the Financial Times. We offer a competitive salary, excellent pension, private healthcare, plus a share scheme (3.5% + 3.5% matching) which makes you a CGI Partner not just an employee. We are committed to inclusivity, building a genuinely diverse community of tech talent and inspiring everyone to pursue careers in our sector, including our Armed Forces, and are proud to hold a Gold Award in recognition of our support of the Armed Forces Corporate Covenant. Join us and you'll be part of an open, friendly community of experts. We'll train and support you in taking your career wherever you want it to go. Due to the secure nature of the programme, you will need to hold UK Security Clearance or be eligible to go through this clearance. This is a hybrid position based in Leeds.
Dans le cadre d'un renforcement d'une équipe Data pour un de nos clients, nous recherchons un Data Engineer Senior spécialisé Databricks pour intervenir sur des projets de transformation et d'industrialisation des plateformes Data. Vous participerez à la conception, au développement et à l'optimisation de pipelines de données robustes, performants et scalables, dans des environnements Lakehouse et Cloud. Vos principales responsabilités seront : Concevoir, développer et maintenir des pipelines de données sur Databricks. Développer des traitements distribués avec Apache Spark / PySpark. Assurer l'ingestion, la transformation et la mise à disposition des données. Concevoir et faire évoluer les différentes couches d'un Data Lake / Lakehouse. Mettre en œuvre les bonnes pratiques Medallion Architecture. Travailler avec Delta Lake / Delta Tables. Participer à la conception et à l'évolution de l'architecture Data. Optimiser les performances et la scalabilité des traitements. Industrialiser les développements et les déploiements. Mettre en place et maintenir les pipelines CI/CD. Utiliser Git pour la gestion, le versioning et la revue du code. Contribuer à l'automatisation et, lorsque nécessaire, aux pratiques Infrastructure as Code. Participer à l'amélioration continue de la plateforme Data et aux choix techniques.
Nous recherchons un(e) Consultant(e) Data & Insights pour rejoindre notre équipe. Votre rôle sera de vous assurer que les données sont transformées en insights pertinents et exploitables, contribuant à l'amélioration continue de nos services. Votre travail aura un impact direct sur les problématiques commerciales et stratégiques liées à la Banque Privée. Responsabilités principales : - Prendre en charge le processus de bout en bout, depuis la collecte du besoin jusqu'à la livraison d'insights basés sur les données pour le secteur de la Banque Privée. - Réaliser des entretiens de cadrage avec les demandeurs, identifier les besoins en information et concevoir les solutions analytiques appropriées. - Développer et présenter des analyses de données à l'aide de SQL ou Python, puis traduire les résultats en recommandations concrètes et exploitables. - Piloter des projets visant à développer des opportunités commerciales (commercial leads) basées sur les données et à les déployer auprès des équipes métier et IT. - Suivre les délais et gérer les attentes des différentes parties prenantes afin de garantir une livraison des analyses dans les temps. - Accompagner les équipes transverses dans l'amélioration des parcours clients, de la conversion commerciale et du développement de nouvelles offres.
