Nous recherchons un Data Engineer H/F pour une mission à Nantes. Missions : Recueil et analyse des problématiques liées aux données afin d'identifier les besoins des utilisateurs Cartographie des différentes sources et compréhension des flux de données existants Participation à la définition de l'architecture et de la structuration des données Développement des flux d'intégration et d'alimentation des datamarts à l'aide d'outils ELT Surveillance des traitements et analyse des erreurs ou anomalies rencontrées Mise en œuvre des corrections et des améliorations sur les pipelines Vérification de la fiabilité et de la qualité des données produites Rédaction des documents techniques et formalisation des procédures Contrôle quotidien de l'exécution des flux et suivi des traitements en production
Nous recherchons pour un de nos clients un Data Engineer Databricks confirmé (H/F) dans le cadre d'un projet de transformation data au sein d'une grande entreprise internationale, vous intégrerez une équipe agile composée de 8 personnes, rattachée à la Direction Data. Vous interviendrez sur la mise en place et l'industrialisation de pipelines de données, ainsi que sur le suivi de leur lineage jusqu'aux cas d'usage métier. Vous contribuerez également à la diffusion des bonnes pratiques autour de Databricks et des méthodes modernes de développement data. MissionsConcevoir et développer des pipelines de données performants et évolutifs sur Databricks. Développer les traitements en Python / PySpark et SQL. Optimiser les pipelines existants et améliorer les temps de traitement. Mettre en œuvre les bonnes pratiques de partitionnement et de gestion des données. Contribuer à l'optimisation de la gestion des clusters et de l'ordonnancement des traitements. Participer à la mise en place et à l'adoption des Databricks Asset Bundles. Intégrer les développements dans les processus CI/CD. Travailler avec les outils de gestion de versions et de collaboration, notamment Git ou Azure DevOps. Contribuer à la documentation et à la standardisation des architectures et processus. Participer à la mise en place de pratiques de développement assistées par l'IA, notamment avec GitHub Copilot et Visual Studio Code. Apporter un support technique aux membres de l'équipe sur Databricks et les pipelines développés. Collaborer dans un environnement agile avec des équipes françaises et internationales.
Dans le cadre de la réalisation d'un projet en assistance technique, nous recherchons un(e) Data Engineer pour l'un de nos clients du secteur aéronautique. Vous interviendrez sur le site client situé dans les Hautes-Pyrénées (65). Vos missions seront les suivantes : - Développer des évolutions de notre plateforme permettant de récolter et distribuer les données d'activité en vue de permettre la construction de produits de données : .dbt ; snowflake ; power BI ; streamlit : azure ; - Réaliser des travaux de data engineering (scriptes, modélisations, …) pilotés en DevOps (via la solution Azure DevOps) par le Lead Data Engineer du périmètre concerné ; - Compléter toutes les documentations IT obligatoires : CDM, HLD (high level Design du système), DAT (dossier d'architecture technique), DEX (dossier d'exploitation) ; - Prendre en charge et corriger des incidents liés à ces composants après livraison.
Contexte de la mission : Viveris pilote les chantiers de transformation métier et IT qui contribuent à la performance des entreprises bancaires. Dans ce cadre, nous recherchons notre Data Engineer qui contribuera à un programme important d'évolution de la plateforme Data. Vos missions et responsabilités : - Analyser les besoins métiers et les traduire en solutions BI pertinentes et durables ; - Modéliser les données en cohérence avec les objectifs fonctionnels et les bonnes pratiques décisionnelles ; - Créer et maintenir les flux de données via des outils ETL, en assurant leur qualité, robustesse et performance ; - Participer à la recette et au suivi de production des chaînes décisionnelles, en lien étroit avec les utilisateurs ; - Assurer un rôle transverse sur les projets décisionnels : échange avec les MOA, rédaction de spécifications fonctionnelles, accompagnement des utilisateurs.
ContexteDans le cadre du renforcement de son équipe QA, nous client recherche un Data QA Engineer pour garantir la qualité, la fiabilité et l'intégrité des produits de données et des pipelines. Intégré(e) à une équipe Data fonctionnant en environnement Agile/SAFe, vous travaillerez en étroite collaboration avec les Product Owners, Data Engineers et équipes QA afin de définir les stratégies de test, sécuriser les livraisons et automatiser les contrôles qualité. L'objectif est d'intégrer la qualité le plus en amont possible du cycle de développement (approche Shift-Left) et de limiter les anomalies jusqu'en production. Missions principalesDéfinir la stratégie de tests sur le périmètre Data en collaboration avec le PO et les équipes Data. Concevoir et exécuter des campagnes de tests fonctionnels et de bout en bout. Vérifier la qualité, la cohérence et l'exactitude des données et des produits Data. Analyser les besoins et définir les scénarios de tests en lien avec les exigences fonctionnelles. Préparer et exécuter les tests sur des environnements Azure / Databricks. Identifier, analyser et suivre les anomalies jusqu'à leur résolution. Contribuer à l'automatisation des tests, notamment sur les flux d'ingestion et les produits Data critiques. Travailler avec les équipes d'automatisation QA pour développer et maintenir les tests automatisés. Participer à l'amélioration continue des pratiques, outils et processus QA. Suivre les indicateurs de qualité et de couverture des tests. Contribuer au partage des bonnes pratiques au sein de la communauté QA. Environnement techniqueData : Azure, Databricks, SQL Gestion des tests : Jira / X-Ray Automatisation : Gherkin, Selenium, Appium, RestAssured API : Postman Exécution des tests : LambdaTest Monitoring / logs : Datadog Méthodologie : Agile / Scrum / SAFe Compétences techniquesIndispensables3 à 4 ans d'expérience en QA / Software Testing. Très bonne maîtrise de SQL et capacité à contrôler et analyser des données. Expérience sur une plateforme Data. Connaissance de l'environnement Azure et/ou Databricks. Maîtrise de Jira / X-Ray. Expérience en automatisation des tests avec Gherkin / Cucumber. Connaissance de frameworks tels que Selenium, Appium ou RestAssured. Expérience des tests d'API avec Postman. Nice-to-haveExpérience de LambdaTest et Datadog. Certification ISTQB. Expérience dans un environnement Agile à l'échelle / SAFe
Rattaché à une équipe dédiée à la performance data, vous intervenez sur la conception, le développement et l'évolution de solutions de Business Intelligence orientées e-Retail. Vous prenez en charge l'ensemble du cycle de vie des projets data : de l'analyse des besoins métiers jusqu'au déploiement des solutions, en passant par leur développement. Grâce à votre séniorité, vous jouez un rôle clé de référent technique et de manager d'équipe. Gestion de projet & delivery :Piloter la planification, le budget et les ressources des projets data Recueillir et traduire les besoins métier en spécifications techniques et data products Superviser la conception, le développement et la maintenance des pipelines de données Garantir la livraison des dashboards et reportings (Power BI) Optimiser les processus afin d'assurer la qualité et la fiabilité des données Coordination & cohérence :Assurer la cohérence globale des projets BI via des référentiels et catalogues de données Faciliter la communication entre équipes techniques et métiers Garantir l'alignement des projets avec les enjeux business Favoriser les synergies entre les différents projets data Management d'équipe :Encadrer et accompagner une équipe de data engineers / analytics engineers Promouvoir un environnement de travail collaboratif et bienveillant Assurer le développement des compétences (coaching, formation, feedback) Développement & évolution technique :Développer des pipelines et transformations de données Construire et maintenir des rapports et dashboards Optimiser les performances des traitements et modèles de données Maintenance & support :Identifier et corriger les incidents liés aux flux data et aux reportings Garantir des délais de résolution efficaces Assurer le suivi et le reporting des incidents Lead technique :Piloter les revues de code et garantir les bonnes pratiques Être référent technique pour l'équipe Intervenir en support sur des projets critiques ou urgents Assurer la continuité opérationnelle de l'équipe data
Nous recherchons un(e) data engineer capable de trouver des solutions innovantes et robustes à l'ensemble des problématiques Data. Vous aurez la charge de : • Participer à la conception et réalisation d'une solution Data depuis l'acquisition jusqu'à l'exploitation de la donnée en accompagnant la réflexion des directions métiers • Identifier, collecter et intégrer les données nécessaires à la résolution de problématiques métier et opérationnelles • Garantir la qualité des données en mettant en place les outils de mesure et de suivi adéquats en appliquant les règles de Data Gouvernance et de Data Management • Transcrire des besoins métier en règles de gestion data • Industrialiser le déploiement de vos réalisations à travers l'implémentation de tests unitaires, d'intégration et de non-régression Référence de l'offre : f21xio6jiw
En quelques motsCherry Pick est à la recherche d'un "Data Engineer Databricks (H/F) " pour un client dans le secteur du Retail Description🏢 Le Contexte : Passer à l'Échelle la Data Factory Supply ChainAu sein de la filiale informatique d'un groupe majeur de la grande distribution, la Data Factory réunit les équipes IT et les directions métiers pour concevoir, développer et déployer des produits analytiques et Data Science à forte valeur ajoutée. Afin de répondre à une demande croissante, l'organisation s'industrialise et adopte un modèle Agile à l'échelle (Domaines, Tribus, Squads). Vous intégrerez la squad Supply / Logistique, responsable de la création de cas d'usage stratégiques dédiés à l'optimisation des flux, à la gestion des entrepôts et à la performance logistique. Nous recherchons un(e) Data Engineer Confirmé / Senior évoluant sur une plateforme Cloud Azure / Databricks. Ce poste exige une réelle polyvalence : au-delà de la construction des pipelines de données, vous serez le garant de la qualité (QA/Testing) et participerez activement à la restitution décisionnelle. 🎯 Vos Missions : Pipelines, Data Warehouse, QA & RestitutionRattaché(e) à la squad Supply Chain, vos activités couvrent tout le cycle de vie de la donnée : 1. Data Engineering & Cloud Architecture (Majeure) : Concevoir et construire de manière industrielle les pipelines de données (ETL/ELT) pour transformer, enrichir et ingérer les données dans le Data Lake. Développer des notebooks Databricks (Spark / Python) pour assurer des traitements massifs complexes. Mettre en œuvre et optimiser les solutions de Cloud Data Warehousing (tuning de requêtes SQL, modélisation de tables). Assurer la livraison continue des développements dans un environnement DevOps intégrant les processus CI/CD (Azure DevOps). 2. QA, Testing & Qualité de Code : Assurer la QA et le testing des pipelines développés par le second Data Engineer de la squad. Concevoir et exécuter les tests unitaires, d'intégration et de non-régression. Réaliser des revues de code rigoureuses pour garantir le respect des bonnes pratiques et des standards d'ingénierie. 3. Data Analyse & Restitution Decisionnelle : Participer au recueil des besoins métiers et mener les analyses de données en amont. Concevoir et développer les tableaux de bord sous Power BI pour restituer les indicateurs Supply Chain aux opérationnels. Rédiger la documentation technique (Dossiers d'Analyse Technique, release notes).
CDI - 2 jours de télétravail / semaine - Nantes - Expérience de 3 ans minimum Nous poursuivons notre développement et recherchons actuellement un(e) ingénieur décisionnel ETL pour intervenir chez un de nos clients dans le secteur bancaire. Contexte : Rejoignez une équipe Data au cœur de la connaissance client et des activités commerciales d'un grand groupe bancaire. Vos principales missions : Vous jouerez un rôle clé dans la construction et la performance des pipelines de données : Conception & Développement - Concevoir, développer et maintenir des flux ETL robustes et industrialisés sous Stambia / Semarchy - Modéliser et structurer les données selon les besoins métiers et techniques - Développer des jobs d'intégration, de transformation et de restitution Qualité & Performance - Optimiser les traitements pour garantir la performance, la scalabilité et la fiabilité des pipelines - Mettre en place des contrôles qualité, règles de validation et mécanismes d'alerting - Participer à l'amélioration continue des bonnes pratiques Data Analyse & Collaboration - Analyser les besoins fonctionnels et proposer des solutions techniques adaptées - Collaborer avec les équipes BI, Data, IT et les référents métiers - Documenter les flux et leur cycle de vie pour garantir la pérennité des traitements ⚙ Stack technique du projet : - ETL : Stambia / Semarchy ( xDM / xDI) - SQL
CDI / Portage / Freelance - 2 jours de télétravail / semaine - Nantes - Expérience de 3 ans minimum Nous poursuivons notre développement et recherchons actuellement un(e) ingénieur décisionnel ETL pour intervenir chez un de nos clients dans le secteur bancaire. Contexte : Rejoignez une équipe Data au cœur de la connaissance client et des activités commerciales d'un grand groupe bancaire. Vos principales missions : Vous jouerez un rôle clé dans la construction et la performance des pipelines de données : Conception & Développement - Concevoir, développer et maintenir des flux ETL robustes et industrialisés sous Stambia / Semarchy - Modéliser et structurer les données selon les besoins métiers et techniques - Développer des jobs d'intégration, de transformation et de restitution Qualité & Performance - Optimiser les traitements pour garantir la performance, la scalabilité et la fiabilité des pipelines - Mettre en place des contrôles qualité, règles de validation et mécanismes d'alerting - Participer à l'amélioration continue des bonnes pratiques Data Analyse & Collaboration - Analyser les besoins fonctionnels et proposer des solutions techniques adaptées - Collaborer avec les équipes BI, Data, IT et les référents métiers - Documenter les flux et leur cycle de vie pour garantir la pérennité des traitements ⚙ Stack technique du projet : - ETL : Stambia / Semarchy ( xDM / xDI) - SQL
Au sein du département R&I d'un grand groupe international, nous faisons évoluer une plateforme clé de gestion et de découverte de contenus. Nous recherchons un(e) Expert(e) Search & Data Engineer pour concevoir, structurer et implémenter le nouveau moteur de recherche avancée de l'application. Vous évoluerez dans un environnement technique moderne combinant recherche textuelle/sémantique, bases de données orientées graphe (Neo4J) et interfaces React. Vos missions Architecture & Conception : Analyser les besoins métiers liés à la découverte et au filtrage de données complexes. Concevoir la stratégie d'indexation (mapping, tokenizers, analyzers) et choisir les algorithmes de pertinence et de scoring (BM25, recherche vectorielle/sémantique). Implémentation & Optimisation : Implémenter les requêtes de recherche avancée (floue, synonymes, multi-critères, facettes, tri dynamique, autocomplétion, suggestions). Optimiser les performances d'indexation et la latence des requêtes sur de gros volumes. Intégration & Collaboration : Assurer l'interconnexion et la synchronisation des données entre le moteur de recherche et la base orientée graphe Neo4J. Exposer et consommer les API REST/GraphQL en collaboration avec les équipes Back-end et Front-end (React). Rédiger la documentation technique et former les équipes aux bonnes pratiques du moteur.
A LIRE ATTENTIVEMENT AVANT DE POSTULER ⬇ Strasbourg - Expérience de 2 ans minimum Vous aimez transformer les données en décisions concrètes ? Cette opportunité est faite pour vous ! Nous poursuivons notre développement et recherchons actuellement un.e Data Engineer pour intervenir chez un de nos clients, intervenant dans le secteur bancaire. Contexte : Vous interviendrez directement sur des projets d'intégration et d'exploitation de données, contribuant à rendre l'information accessible et exploitable pour les équipes métier. Voici un aperçu détaillé de vos missions : - Concevoir et maintenir des processus d'intégration de données (ETL / ELT), idéalement avec Semarchy xDI (anciennement Stambia) - Participer à la modélisation de systèmes décisionnels et à l'organisation des données - Manipuler et optimiser les bases de données avec le SQL - Collaborer avec les équipes BI sur des outils comme SAP/BO Situation géographique : Strasbourg (67)
TON CHALLENGE: Prendre part à des projets stimulants dans le secteur du retail ou banque assurance en travaillant avec une équipe soudée, expérimentée et méthodique sur les tâches suivantes : Concevoir et développer des interfaces utilisateur interactives en utilisant Python, SQL Collaborer avec les concepteurs et les développeurs back-end Optimiser les performances de l'application Optimiser les performances de l'application Effectuer des tests et assurer la qualité du code
Lieu : Brest (29) Salaire : 50 à 55 000 euros annuel brut Rythme : 2 jours de télétravail à l'issue d'une période d'intégration Nous recherchons pour notre client, acteur industriel spécialisé, un Data Engineer BI dans le cadre d'un projet de renfort de l'équipe décisionnelle. VOS MISSIONS : Au sein d'une équipe composée de 4 personnes et rattaché au Responsable Décisionnel, vos missions consistent à : 1. Acquisition & intégration des données En appui des Référents SI Métier, recueillir les besoins métiers et formaliser des cas d'usage décisionnels Assurer l'extraction des données depuis différentes sources (ERP, fichiers, APIs…) Concevoir et développer les nouveaux flux d'alimentation (ETL/ELT), dans le respect des bonnes pratiques de développement TALEND Mettre en place des contrôles de qualité, de cohérence et de traçabilité des données 2. Transformation & modélisation Concevoir et maintenir les traitements de transformation de données Concevoir et documenter les modèles de données (datamarts, DWH, modèles analytiques) robustes, performants et orientés usages métiers Elaborer et déployer des univers BO et modèles sémantiques POWER BI Optimiser les performances des traitements et des modèles 3. Conception de solutions BI et analytiques Développer des rapports, états et tableaux de bord décisionnels (Business Object Construire et mettre en production des rapports de Dataviz (PowerBI) Produire/maintenir une documentation claire et exploitable (rétro-documentation, référentiels) et documenter le data-lineage Contribuer à la conduite du changement et à l'appropriation des outils par les métiers 4. Migration & modernisation des flux Analyser les flux historiques, identifier les écarts et proposer des ameliorations Participer activement à la migration des flux existants de BODS vers TALEND et à la mise en qualité du patrimoine existant (rationalisation, gestion des erreurs…) Garantir la continuité de service et la fiabilité des données durant la migration 5. Structuration & bonnes pratiques Contribuer à la définition, la mise en place et la documentation des bonnes pratiques de développement SI Décisionnel En appui de la responsable SI Décisionnel, être garant des choix de modélisation, des principes ETL/ELT et de l'application des bonnes pratiques BI Contribuer à la mise en place de la gouvernance de la donnée (qualité, référentiels, rôles) 6. Maintenance & amélioration continue Assurer le maintien en conditions opérationnelles des flux existants sur BODS et TALEND Faire évoluer et maintenir les rapports SI Décisionnels existants Gérer les incidents et assurer le support aux utilisateurs en traçant vos actions dans notre outil de ticketing JIRA Participer à l'amélioration continue de l'architecture data et des processus Environnement Technique : Talend, SAP BO, Power SI, SQL, BODS
Nous recherchons pour l'un de nos clients un(e) Data Test Engineer pour intervenir sur ses projets Datalake en tant que garant de la qualité des développements et des flux de données. Vous jouez un rôle central entre les équipes de développement, les Product Owners et les parties prenantes métier, dans un environnement Agile/SAFe. Vos missions Vous définissez la stratégie et le plan de tests adaptés aux projets Datalake, puis préparez les environnements et jeux de données nécessaires à leur exécution. Vous réalisez les tests manuels et automatisés, conduisez les tests d'intégration et de performance, et assurez le suivi rigoureux des anomalies détectées jusqu'à leur résolution. Acteur à part entière des cérémonies Agile/SAFe, vous produisez les livrables de test et le reporting qualité attendus, tout en accompagnant les équipes projet dans l'amélioration continue de leurs pratiques.
Nous recherchons un(e) data Engineer DBT Snowflake capable de trouver des solutions innovantes et robustes à l'ensemble des problématiques Data. Vous aurez la charge de : • Participer à la conception et réalisation d'une solution Data depuis l'acquisition jusqu'à l'exploitation de la donnée en accompagnant la réflexion des directions métiers • Identifier, collecter et intégrer les données nécessaires à la résolution de problématiques métier et opérationnelles • Garantir la qualité des données en mettant en place les outils de mesure et de suivi adéquats en appliquant les règles de Data Gouvernance et de Data Management • Transcrire des besoins métier en règles de gestion data • Industrialiser le déploiement de vos réalisations à travers l'implémentation de tests unitaires, d'intégration et de non-régression Référence de l'offre : x3qjzedtly
