Nous recherchons un(e) Tech Lead Data Engineer capable de trouver des solutions innovantes et robustes à l'ensemble des problématiques Data. Vous aurez la charge de : • Assurer la mise en œuvre de l'accès, du référencement et de la qualité de la donnée • Assurer l'industrialisation, la supervision et l'intégration des solutions • Rédiger les normes de développement • Participer à la rédaction du manuel d'exploitation En tant que Tech Lead, vous savez : • Vous présenter et promouvoir des architectures data face au client • Identifier et comprendre les besoins métiers • Former, encadrer et faire évoluer les consultants juniors • Participer à la réponse aux appels d'offres (avant-vente) Référence de l'offre : efielz010x
Nous recherchons un Data Engineer Senior pour renforcer une équipe Data et intervenir sur une plateforme AWS traitant d'importants volumes de données. Vous participerez à la conception, à l'optimisation et à l'industrialisation des pipelines Data, avec des enjeux forts de performance, de qualité et de scalabilité. Missions principalesConcevoir, développer et maintenir des pipelines Data sur AWS. Développer et optimiser les traitements en Python, SQL et PySpark. Orchestrer les workflows avec Airflow / MWAA. Optimiser les traitements Spark sur des volumes importants. Concevoir et faire évoluer les modèles de données au sein du Data Lake. Garantir la qualité, la fiabilité et la performance des données. Mettre en place le monitoring et optimiser les coûts des traitements. Collaborer avec les équipes Data Science et métiers. Exploiter les outils d'IA générative et agentique pour améliorer les pratiques de développement. Environnement techniqueStack principale : AWS : S3, Glue, Athena, EMR, MWAA, ECS, Lambda Python : Pandas, PySpark, AWS Wrangler SQL avancé Apache Spark Apache Airflow / MWAA Parquet, Iceberg, Delta Lake Compétences complémentaires : Terraform IAM / Sécurité Cloud Data Lake / Data Modeling IA générative et agentique
Nous recherchons un Data Engineer GCP / BigQuery / Java – Grade C pour intervenir au sein d'une équipe BI spécialisée dans les données clients, dans un environnement Big Data et Cloud en pleine évolution. Informations sur la missionLocalisation : Toulouse Présence sur site : 2 jours par semaine Démarrage : ASAP Fin de mission : 31/12/2027 TJM : 400 € HT Contexte de la missionVous intégrerez une équipe BI dédiée aux données clients, travaillant principalement sur les données liées à un programme de fidélité. L'environnement technique repose actuellement sur des solutions de BI traditionnelle et de Big Data, avec une migration progressive vers le Cloud GCP en cours. Vous évoluerez au sein d'une organisation agile structurée autour du framework SAFe, en collaboration avec les équipes impliquées dans les projets Data et BI.
Contexte de la mission : Le consultant intégrera l'équipe Data & AI Procurement, dont la principale mission est d'ingérer, centraliser et transformer les données issues de différents systèmes afin de répondre à différents usages métiers : # Self-service BI — mise à disposition de données exploitables en autonomie par les équipes métier ; # Dashboards Tableau — visualisation et pilotage de la performance achats # Reporting — production de rapports structurés ; # Applications Data — développement de solutions applicatives orientées usage métier Description de la mission : L'équipe Data & AI Procurement poursuit la construction et le maintien de sa Data Foundation. Ce socle repose sur une plateforme data composée : DataHub (outil interne) pour la récupération des sources de données, Snowflake comme entrepôt de données, DBT pour la modélisation et les transformations, et Airflow pour l'orchestration des pipelines. Dans le cadre d'un remplacement, nous recherchons un Data Engineer qui interviendra exclusivement sur la partie Data Foundation, et plus précisément sur la création de nouvelles pipelines et la maintenance des pipelines existantes. Le consultant prendra en charge ces pipelines de bout en bout : de la récupération des données sources via DataHub jusqu'à leur mise à disposition — ingérée dans Snowflake, modélisée et testée — pour les usages métiers. Le consultant évoluera au sein de l'équipe Data Foundation et travaillera en étroite collaboration avec : - Business Data Analysts : Expression et Cadrage des besoins de données, compréhension des usages métiers. - Data Engineers de l'équipe Data Foundation : conception, développement et maintenance des pipelines, partage des bonnes pratiques.
Contexte Dans le cadre de notre croissance, Hexateam recrute deux Data Engineer pour intervenir sur des environnements Databricks sur AWS, avec des enjeux d'ingestion, de transformation et de fiabilité des données. Missions Développement et ingestion de données • Concevoir et développer des pipelines de données en Python et Spark sur Databricks • Mettre en place des flux entre sources externes (ex : Oracle) et un Data Lake (S3 / Delta Lake) • Optimiser les traitements et les performances Orchestration et qualité des données • Orchestrer les workflows avec AWS Airflow • Mettre en place des contrôles qualité et des mécanismes de validation • Développer des outils de monitoring et de gestion des anomalies Maintien en condition opérationnelle • Assurer la disponibilité et la performance des pipelines • Diagnostiquer et corriger les incidents • Participer à l'amélioration continue des traitements Contribution • Participer aux ateliers techniques et aux échanges avec les équipes • Documenter les pipelines, architectures et processus • Contribuer aux bonnes pratiques Data et Big Data
Contexte de la missionDans le cadre du développement de ses capacités Data et IA, Sanofi souhaite renforcer ses équipes avec un profil senior capable de contribuer à l'industrialisation de pipelines data et au développement d'agents IA. Les solutions développées ont vocation à être utilisées à grande échelle, potentiellement par près de 100 000 collaborateurs à travers l'entreprise. Elles doivent permettre de simplifier l'accès à des systèmes et données complexes et de fluidifier les processus du quotidien, notamment dans les domaines suivants : Finance et paiements ; Industrie et opérations ; Commerce ; Logistique ; Support IT ; Gestion des incidents. La mission se situe à l'intersection de la Data Engineering, de la Data Platform et de l'Agentic AI. Objectifs de la missionLe consultant contribuera à : transformer et structurer les données utilisées par les solutions IA ; concevoir et développer des pipelines de données robustes ; industrialiser les flux et les plateformes data jusqu'à leur mise en production ; développer des agents IA et des interfaces conversationnelles connectés aux données et systèmes internes ; rendre les processus métiers plus simples, rapides et fluides ; garantir la fiabilité, la maintenabilité et la scalabilité des solutions développées ; accompagner le passage de prototypes ou expérimentations IA vers des solutions utilisables en production. Principales responsabilitésLe consultant interviendra notamment sur les activités suivantes : analyser les besoins techniques et métiers liés aux projets Data et IA ; concevoir l'architecture des pipelines et des flux de données ; développer, maintenir et optimiser les pipelines data ; travailler sur des environnements Snowflake et dbt ; préparer les données nécessaires à l'alimentation de modèles, d'agents et d'interfaces IA ; participer à la conception d'agents capables d'interagir avec les données et les systèmes de l'entreprise ; mettre en place les bonnes pratiques d'industrialisation, de déploiement et de supervision ; contribuer à la qualité, la sécurité, la gouvernance et la traçabilité des données ; collaborer avec les équipes Data, IA, Architecture, IT, métiers et sécurité ; documenter les solutions et accompagner leur adoption par les utilisateurs. Environnement techniqueCompétences indispensablesData Engineering ; Snowflake ; dbt ; conception et développement de pipelines data ; industrialisation et mise en production de plateformes ou produits data ; compréhension des architectures Data et IA ; expérience concrète sur des projets d'IA générative ou d'Agentic AI. Compétences complémentaires appréciéesPython et SQL ; AWS ; Airflow ou outils d'orchestration similaires ; APIs et intégration de systèmes ; architectures cloud ; RAG, LLM ou interfaces conversationnelles ; observabilité, CI/CD et pratiques DevOps ; sécurité et gouvernance des données. Compétences / Qualités indispensables : date engineering, python, aws, ia agentique
Nous recherchons un Cloud Data Engineer pour participer à la conception et à l'évolution d'une plateforme de données cloud moderne, destinée à soutenir les besoins croissants de l'entreprise en matière de données, d'analytique et de reporting. Vous rejoindrez une équipe d'ingénierie dynamique et collaborative, en charge de l'un des programmes technologiques les plus stratégiques de l'organisation. Votre équipeVous intégrerez une équipe de Data Engineers passionnés par la création de solutions de données performantes, évolutives et fiables. L'équipe est responsable du développement des fondations data permettant la mise en place de capacités analytiques avancées, de reporting et de produits de données à grande échelle. Vous collaborerez étroitement avec les équipes Data Platform, Data Ingestion, BI ainsi qu'avec les différents métiers afin de fournir des données fiables, accessibles et à forte valeur ajoutée pour l'ensemble de l'entreprise. Le poste est basé à Stockholm. Vos responsabilitésConcevoir, développer et maintenir des pipelines de données et des transformations de données à l'aide de Azure Databricks, dbt, PySpark et Python. Construire et maintenir des modèles de données robustes pour répondre aux besoins d'analyse, de reporting et des applications métiers. Orchestrer et automatiser les flux de données via Databricks Workflows, Apache Airflow et Azure Data Factory. Garantir la qualité, la fiabilité, la performance et la scalabilité des données sur l'ensemble de la plateforme. Mettre en place des capacités d'observabilité et de monitoring afin d'assurer le suivi et la validation des données. Contribuer à l'automatisation et à l'amélioration continue grâce aux pratiques CI/CD et aux standards d'ingénierie. Collaborer avec les développeurs, architectes, ingénieurs plateforme et parties prenantes métiers pour délivrer des solutions data à forte valeur. Participer activement à la vie de l'équipe, aux cérémonies Agile et au partage de connaissances afin de contribuer à une culture d'excellence. Votre profilNous recherchons un Data Engineer expérimenté possédant une solide expérience dans la conception, le développement et l'exploitation de pipelines de données au sein de l'écosystème Azure. Le poste est fortement orienté Data Engineering et développement de pipelines, plutôt que sur les aspects infrastructure ou administration de plateforme. Vous appréciez le travail en équipe, êtes à l'aise dans des environnements collaboratifs et savez interagir avec des interlocuteurs aussi bien techniques que métiers. La maîtrise du suédois est un plus, ou une volonté de développer cette compétence. Compétences requisesExcellente maîtrise de SQL, Python et PySpark. Expérience significative dans le développement de solutions data sur Azure Databricks. Bonne maîtrise de dbt pour la transformation, la modélisation, les tests et la documentation des données. Expérience avec des outils d'orchestration tels que Apache Airflow et/ou Azure Data Factory. Bonne compréhension des pratiques CI/CD et de l'automatisation des déploiements de pipelines de données. Connaissance des principes de gouvernance des données : qualité, traçabilité, gestion des accès et utilisation de Unity Catalog. Expérience de la création et de la maintenance de pipelines de données et de produits data en environnement de production. Compétences appréciéesExpérience avec Microsoft Fabric ou d'autres plateformes Data SaaS modernes. Expérience dans des environnements cloud d'envergure. Bonne compréhension des architectures data modernes et des plateformes analytiques cloud-native. Cette opportunité s'adresse à un Data Engineer souhaitant contribuer à la construction d'une plateforme de données moderne au sein d'un environnement technologique innovant et à fort impact métier.
Nous recherchons un(e) Data Engineer/Snaplogic H/F en CDI, en full télétravail capable de trouver des solutions innovantes et robustes à l'ensemble des problématiques Data. Vous aurez la charge de : • Participer à la conception et réalisation d'une solution Data depuis l'acquisition jusqu'à l'exploitation de la donnée en accompagnant la réflexion des directions métiers • Identifier, collecter et intégrer les données nécessaires à la résolution de problématiques métier et opérationnelles • Garantir la qualité des données en mettant en place les outils de mesure et de suivi adéquats en appliquant les règles de Data Gouvernance et de Data Management • Transcrire des besoins métier en règles de gestion data • Industrialiser le déploiement de vos réalisations à travers l'implémentation de tests unitaires, d'intégration et de non-régression Référence de l'offre : 1i92s83kwj
L'équipe que vous allez rejoindre est en charge d'accompagner les équipes métiers et IT dans la conception, le développement et l'industrialisation de solutions autour de la Data et de la GenAI. Dans un contexte de forte croissance des usages data et des volumes traités, l'équipe joue un rôle clé dans l'accélération des initiatives data du Groupe, en s'appuyant sur l'écosystème technologique (notamment AWS, Dataiku, Collibra, Databricks) et en garantissant l'alignement avec les standards de sécurité, de gouvernance et de performance. Les activités de l'équipe couvrent l'ensemble de la chaîne de valeur de la donnée, depuis sa collecte et son ingestion jusqu'à sa transformation et sa valorisation, en intégrant les enjeux d'optimisation des performances et des coûts. En parallèle, l'équipe conçoit et développe des outils, frameworks et solutions visant à simplifier l'expérience des utilisateurs, à industrialiser les pratiques et à accélérer le développement et le déploiement de cas d'usage Data et GenAI au sein de l'écosystème.
La mission consiste à : - Exposer les données utiles à l'entreprise pour les analyser et les utiliser afin d'améliorer l'expérience utilisateur et la productivité - Transformer des données issues du DataLake afin de les normaliser - Modéliser la sphère de données - Développer les flux - Exposer des données brutes et/ou agrégées au bon niveau de granularité aux différents métiers de l'entreprise - Travailler en lien avec des Data Scientists sur les données qu'il aura exposées - Mettre en place des rapports de Dataviz - Mission basée en métropole lilloise avec présence sur site 3j/semaine obligatoire Compétences demandées : - Première expérience en Data Engineering indispensable - Snowflake, GCP, BigQuery, DBT, SQL, Semarchy, Airflow, Python ... - Data Analyse sur Power BI un + - Excellents savoir-être : rigueur, esprit analytique et de synthèse, communication... - Méthode Agile - Anglais
Data Engineer with C# Dot Net asp.net with SQL Server SSIS Our Client is a bank based in Central London who are looking to recruit at least 7 years plus experience as a Data Engineer with the ability to work with C# Dot net and SQL Server with SSIS. You must have solid expertise of at least 7 years experience of working with and developing software with C# Dot Net and MS SQL Server and SSIS – SSIS is very important for this position. Must be an excellent problem solver and adept writing documentation for all projects. You ideally have worked on banking systems particularly Core Banking. Responsible for the development and delivery of new systems to automate and streamline processes required by different departments. To support the internal IT department with changes and upgrades to software platforms. To be primary contact for all technical questions relating to in-house bespoke systems and interfacing. Data Support Supporting budgeting and financial planning processes for Finance department, including loading and refreshing of data based on requirements. Understand and conduct the front-end functionality to amend and change hierarchical structures within the environment. Build data flows within the SQL environment in SSIS packages. Risk & Regulatory Duties Maintain knowledge of all applicable regulatory requirements including the Bank's Risk and Compliance policies and procedures and adhere to these to avoid exposing the Bank to undue risk. Report policy/procedure breaches and areas of potential non-compliance and suspicions promptly upon identification in accordance with the Bank's Risk and Compliance policies. Accurately execute all controls within own area to minimise risk of policy, procedure, and/or regulatory breaches. Identify new risks/control gaps within own area and escalate accordingly to your Line Manager. Key Skills Software analysis and design. SQL Server query language with SSIS. Data warehouse design concepts, (Inmon or Kimball) Experience of developing software with C# Dot Net and asp.net and SQL Server is a must. Must have solid experience of working with SSIS and building data warehouses. The Client is a Bank based in the Central London. Must have a degree qualification. This is a 12 month FTC position with a salary of circa £55K - £70K. This is a hybrid position - you will be required to be in the office at least 3 days week. Do send your CV to us in Word format along with your salary and availability.
À LIRE ATTENTIVEMENT AVANT DE POSTULER ⬇️ 🏠 3 jours de télétravail / semaine – 🛠️ DBT, Snowflake, SQL, Airflow, CI/CD – 💼 3 ans d'expérience minimum Envie de rejoindre une équipe où la tech, la data et les projets stimulants sont au rendez-vous ? Cette opportunité est faite pour vous ! 🚀 Nous poursuivons notre développement et recherchons actuellement un.e Data Engineer DBT / Snowflake pour intervenir chez l'un de nos clients, acteur majeur du secteur des paris sportifs et du divertissement numérique. 💻 Contexte Vous intégrerez un environnement technique stimulant et collaboratif. Vous participerez à des projets de transformation et de valorisation des données, notamment à la construction d'une architecture Lakehouse sur Snowflake, en développant des pipelines de transformation fiables, automatisés et évolutifs. Vous interviendrez sur l'ensemble de la chaîne de traitement des données, de leur transformation à leur mise à disposition pour les différents usages métiers. Voici un aperçu détaillé de vos missions : 🎯 Participer aux phases de conception et de développement des projets de transformation Data Développer et optimiser les chaînes de transformation de données ETL / ELT au sein de l'environnement Snowflake Contribuer à la construction du Lakehouse et à la mise en place des couches Silver et Gold à partir des données de la couche Bronze Développer, maintenir et optimiser les modèles de transformation avec DBT Automatiser les déploiements des pipelines Data à l'aide de DBT Cloud et Jenkins (CI/CD) Participer à l'orchestration et à la fiabilisation des traitements de données Assurer l'évolution, la maintenance et l'amélioration continue des solutions développées Collaborer avec les Data Engineers et les équipes techniques pour garantir la qualité et la performance des traitements Rédiger et maintenir la documentation technique relative aux projets
• Concevoir et implémenter des pipelines d'ingestion et de transformation de données (batch et temps réel), robustes et scalables. • Développer et maintenir les flux ETL Talend qui alimentent le datalake et les systèmes consommateurs. • Développer des traitements Python / PySpark sur Databricks et mettre en œuvre les modèles de données cibles. • Automatiser les transformations, la documentation et les tests de données avec dbt. • Configurer les pipelines d'acheminement des données, y compris les flux CDC. • Mettre en place les bonnes pratiques de qualité de données, de monitoring, d'alerting et de logging. • Développer des modules réutilisables (templates de pipelines, librairies communes, CI/CD) et exploiter les modules existants dans les nouveaux projets. • Réaliser les développements et les tests associés, et accompagner les mises en production.
ASAP Tech recherche un Data Engineer Snowflake / AWS pour accompagner l'un de ses clients à Lille, dans le cadre du développement de nouveaux usages IA au sein des applications. Vous interviendrez sur la conception des modèles de données, le développement des pipelines d'ingestion et l'évolution de la plateforme Data. Vous accompagnerez également les équipes IT et métier dans l'adoption de ces nouveaux usages. Vos missions : Concevoir les nouveaux modèles de données dans Snowflake, adaptés aux besoins des applications et aux usages IA. Développer les pipelines d'ingestion de données et enrichir les modèles existants. Gérer les données intégrées dans Snowflake ou AWS et en apporter une vision consolidée. Assurer la mise en œuvre des évolutions sur la plateforme pour permettre l'utilisation des nouveaux usages. Accompagner les équipes IT et métier dans la prise en main de la plateforme Data. Participer à l'évolution de la plateforme et aux orientations technologiques.
