Trouvez votre prochaine offre d’emploi ou de mission freelance Data Engineering

Dans le cadre du développement de nos activités Data & Intelligence Artificielle, nous recherchons un(e) Ingénieur Data / IA afin de participer à la conception, au développement et à l’industrialisation de solutions data innovantes. Missions principales Développer et maintenir des pipelines de traitement de données Participer à la conception et à l’industrialisation des solutions Data & IA Concevoir et optimiser les flux d’ingestion, transformation et exploitation des données Collaborer avec les équipes Data, métiers et techniques sur les projets IA Développer et déployer des modèles de Machine Learning et d’IA générative Mettre en place les bonnes pratiques de qualité, monitoring et automatisation Participer à l’amélioration continue des plateformes Data Industrialiser les traitements et automatiser les workflows Assurer la fiabilité, la performance et la sécurité des traitements de données Contribuer à la documentation et au partage des bonnes pratiques Participer aux phases de tests, validation et mise en production Environnement technique Plateformes Data Cloud Pipelines ETL / ELT Outils d’orchestration & automatisation Environnements IA & Machine Learning Architecture Data moderne & scalable Méthodologies Agile & DevOps

Le rôle du développeur senior dans ce projet consistera à concevoir et mettre en œuvre les composants suivants de la plateforme : L’ingestion des données Le traitement et la normalisation des données La distribution des données aux différents acteurs La construction et l’amélioration d’un framework commun incluant le monitoring, la CI/CD, les tests, la performance, la résilience, les pratiques de développement et la qualité du code Missions Développer et maintenir les composants de la plateforme Big Data « One Pulse » Garantir la conformité avec les frameworks internes et les directives d’architecture Collaborer avec les parties prenantes du projet afin de promouvoir les bonnes pratiques et proposer des fonctionnalités communes pour la plateforme Concevoir et mettre en œuvre des pipelines d’ingestion, de traitement, de normalisation et de distribution des données Construire et améliorer les frameworks liés au monitoring, à la CI/CD, aux tests, à la performance, à la résilience et à la qualité du code Outils & Environnement Ingénierie logicielle en Python : conception, tests, processus de développement Architecture et technologies Big Data Conception, modélisation et optimisation de pipelines de données dans des environnements distribués Connaissance du cloud AWS : un plus, mais non indispensable

L’enjeu : Structurer et industrialiser la nouvelle Data Platform d'un grand groupe international. En tant que consultant·e indépendant·e pour Okara, tu interviens dans le cadre d’une démarche globale de consolidation et de fiabilisation de remontées de données multi-sources. L'objectif final ? Offrir une traçabilité, une auditabilité et une scalabilité parfaites à l'ensemble des flux data. Ton terrain de jeu ? Un projet stratégique majeur impliquant des interactions directes avec les équipes IT et métiers réparties sur 4 pays en Europe. Ici, on oublie les simples POC : on passe directement en mode industrialisation pour poser un socle robuste et durable. 🚀 Ton rôle Tu es le moteur de l'architecture, de la modélisation et de la mise en œuvre technique. Pour cette mission à temps plein à démarrage immédiat, tu prends les commandes du déploiement. Concrètement, tu vas : Modéliser en Data Vault 2.0 : Concevoir l'architecture en définissant finement les Hubs, Links et Satellites. Tu structures les couches Raw Vault / Business Vault et formalises l'ensemble des règles d’historisation et de traçabilité. Propulser l'environnement Microsoft Fabric : Déployer les pipelines d’ingestion dans Fabric, structurer les Lakehouses / Warehouses et optimiser les performances de tous les traitements. Industrialiser et standardiser : Automatiser les flux d’alimentation en direct avec les CTO des différents pays. Tu installes les contrôles qualité, définis les conventions de nommage et contribues activement aux standards data du groupe. Collaborer et valoriser la donnée : Faire le pont avec les usages décisionnels en apportant ton support à la mise en place de la BI (notamment Power BI). Tu rédiges une documentation technique impeccable et directement exploitable par l'équipe interne.

Dans le cadre d'un programme stratégique de transformation Data & IA au sein d'un grand groupe international, nous recherchons un Data Engineer Senior AWS pour contribuer à l'évolution et à l'industrialisation d'une plateforme Data Cloud déjà en production. Cette plateforme constitue le socle technologique permettant d'alimenter des solutions analytiques avancées et des cas d'usage innovants basés sur l'intelligence artificielle. Vous intégrerez une équipe Data multidisciplinaire évoluant dans un environnement international et fortement orienté Cloud. Missions Participer à la conception et à l'évolution de l'architecture Data Platform et Data Lake/Lakehouse. Développer et maintenir des pipelines de données robustes et performants. Concevoir et implémenter des traitements de données à grande échelle à l'aide des services AWS. Participer à l'intégration de nouvelles sources de données internes et externes. Mettre en œuvre les bonnes pratiques de Data Management, Data Quality et DataOps. Participer à l'automatisation des déploiements et à l'amélioration continue des chaînes CI/CD. Garantir la performance, la sécurité et la maintenabilité des solutions développées. Accompagner les équipes métiers dans la traduction des besoins fonctionnels en solutions techniques. Participer aux phases de mise en production et au support des environnements critiques. Contribuer aux travaux d'amélioration continue de la plateforme.

Dans le cadre d'une transformation Data-centrique du Système d'Information, notre client recherche un Architecte Technique Cloud & Data pour intervenir sur des programmes stratégiques pluri-annuels à fort enjeu. Vous accompagnerez les architectes et urbanistes fonctionnels dans la réalisation de dossiers d'études et de benchmark, dans le choix de solutions et d'architectures fonctionnelles, ainsi que dans la définition des trajectoires et cibles applicatives. Vous contribuerez à la conception et au contrôle de l'architecture applicative, technique et infrastructure sur les projets clients. Vous serez responsable de définir et faire évoluer la trajectoire des solutions et architectures techniques en étroite collaboration avec les équipes supports aux développements et l'ingénierie des infrastructures. Vous participerez également à des études exploratoires et expérimentations sur de nouvelles technologies ou solutions dans un contexte Cloud et Data.

Data Engineer Teradata, bases Hive, Phoenix, HDFS, API Springboot VANNES Profil : • Expertise Forte sur ces technos avec une très bonne communication avec une expérience significative sur les technologies Cloudera. • La mission se déroule sur le site de Vannes et nécessitera d’être présent à minima 3 jours par semaine sur le site (dont les Mardi et Jeudi) Prestation : • Assure le développement et l’intégration des évolutions sur le périmètre des solutions de la Squad • Prépare, réalise la mise en production avec les équipes expertes; assure le SAV • Gère et maintient la documentation fonctionnelle et technique • Contribue à l’assistance à l’utilisation des solutions • Contribue aux séances d'affinage technique en phase de conception • Réalise une veille technologique régulière pour être au fait des dernières tendances • Contribue à alimenter le contenu du backlog pour prévoir les développements futurs • Analyse du patrimoine existant Le besoin est d'accompagner la squad dans un contexte de développement et de maintenance de solutions Data (Teradata, bases Hive, Phoenix, HDFS) et d'API Springboot. Profil : • Expertise Forte sur ces technos avec une très bonne communication avec une expérience significative sur les technologies Cloudera. • La mission se déroule sur le site de Vannes et nécessitera d’être présent à minima 3 jours par semaine sur le site (dont les Mardi et Jeudi)

Missions Au sein d’une équipe transverse composée notamment d’un : Tech Lead UX Data Gouverneur Le consultant interviendra principalement sur : Data Engineering / Analytics Engineering Conception et maintien de flux de données Refactoring de pipelines existants Mise en place et migration vers les bonnes pratiques Data Exposition et mise à disposition des données pour différents usages analytiques Structuration de datasets à destination des Data Analysts et des produits digitaux Participation à l’amélioration de la qualité et de la fiabilité des données Data Analyse & DataViz Compréhension des besoins métiers Accompagnement des équipes produit dans l’exploitation de la donnée Contribution à des dashboards KPI fournisseurs Participation à des sujets de visualisation via Power BI et ponctuellement Looker Collaboration transverse Interaction quotidienne avec les équipes métiers et produits Communication avec des BU à l’international Participation aux échanges techniques et fonctionnels Capacité à challenger les besoins et proposer des solutions adaptées Environnement techniqueObligatoire GCP BigQuery DBT Important Git GitHub Souhaité Terraform Power BI Looker (hors Looker Studio) Expérience environnement retail Connaissance des sujets fournisseurs / marketplace / retail data

Dans le cadre du renforcement d'une Data Platform Cloud, nous recherchons un Data Engineer afin d'intervenir sur des sujets transverses à forte valeur ajoutée. Vous rejoindrez une équipe dédiée à l'amélioration continue de la plateforme data et à la mise en place d'outils mutualisés au service des différentes squads. Votre rôle consistera à concevoir, développer et industrialiser des solutions permettant d'accélérer la production et la fiabilité des usages data. Vos principales missions seront : Développer et maintenir des pipelines de données robustes et scalables. Concevoir des composants et outils réutilisables par plusieurs équipes. Participer à l'industrialisation et à l'automatisation des traitements data. Accompagner les squads sur les bonnes pratiques Data Engineering. Contribuer à l'amélioration des performances, de la qualité et de la gouvernance des données. Collaborer étroitement avec les équipes Data, DevOps et Architecture.

Aquent recherche un(e) Senior Design System Engineer - fluent en anglais - pour l'un de ses clients, un groupe international qui repousse les limites de l'expérience utilisateur. Vous rejoindrez une équipe d'ingénierie globale pour piloter un chantier hautement stratégique : la re-architecture complète de leur Experience System . L'enjeu est de transformer la bibliothèque actuelle en un écosystème de nouvelle génération, capable de gérer le multi-marques, le multi-thèmes , le tout propulsé par une philosophie inner-source et préparé pour les futures intégrations IA . Vos Responsabilités Clés : Sous la responsabilité du Lead Architect et en collaboration directe avec les équipes Design et Produit mondiales, vous interviendrez sur : Ingénierie UI de pointe : Concevoir, optimiser et faire évoluer les composants de la librairie en React et TypeScript avancé (focus fort sur la performance et les APIs composables). Alignement Design-to-Code : Garantir une synchronisation et une parité parfaites entre le code de production et l'environnement Figma (tokens, variables, architecture de bibliothèque). Gouvernance & Excellence Opérationnelle : Piloter le versioning (discipline SemVer stricte), orchestrer la CI/CD, gérer les breaking changes et veiller à la propreté du setup technique (bundle size, testing). Innovation IA : Structurer et enrichir les métadonnées des composants pour créer des contrats de données lisibles par des agents et outils augmentés par l'IA. Support & Évangélisation : Accompagner les équipes produit consommatrices (triage des issues, revues de code des contributions internes, rédaction de documentations et guides de migration).

Contexte Notre client est une organisation internationale évoluant dans un environnement à forte composante data, analytique et quantitative . Ses équipes conçoivent et exploitent des solutions permettant de traiter des volumes importants de données, de produire des analyses avancées et d’accompagner des activités de recherche, de modélisation et de simulation. Dans un contexte de modernisation de ses outils internes, notre client souhaite renforcer une équipe dédiée à la conception d’une plateforme de recherche de nouvelle génération , destinée à faciliter le travail d’équipes analytiques et scientifiques sur des environnements de calcul avancés. À propos du rôle Nous recherchons un(e) Ingénieur(e) logiciel Full Stack Python / Scientific Software Engineer, anglais fluent, pour contribuer à la conception, au développement et à l’industrialisation d’une plateforme de recherche interne. Cette plateforme permettra aux utilisateurs de créer, exécuter et partager des notebooks — par exemple Jupyter ou environnements similaires — tout en masquant la complexité liée à l’accès aux données, à la gestion des environnements techniques et à l’infrastructure de calcul. L’objectif est de conserver la flexibilité appréciée dans les notebooks par les équipes de recherche, tout en rendant ces environnements plus robustes, performants, reproductibles et facilement partageables entre équipes, sans les contraintes opérationnelles associées aux plateformes standards du marché. Il s’agit d’un rôle d’ingénierie opérationnel, à l’intersection du calcul scientifique , des outils de recherche , de la data engineering et du développement logiciel de niveau production . Vos responsabilités Vous serez amené(e) à : Concevoir et développer des workflows de recherche centrés sur les notebooks, permettant à des analystes, chercheurs ou experts quantitatifs d’exécuter et de partager leurs travaux de calcul de manière sécurisée et reproductible. Développer des services backend en Python pour prendre en charge l’exécution des notebooks, l’annotation, les commentaires, le versioning, les sorties de simulation ainsi que la traçabilité des données. Concevoir des processus, services et API permettant aux utilisateurs de parcourir, découvrir, lancer, partager et réutiliser des artefacts de recherche au sein d’une communauté d’utilisateurs internes. Travailler en étroite collaboration avec des équipes de recherche, d’analyse ou de modélisation afin de comprendre leurs usages, leurs besoins de simulation, leurs contraintes opérationnelles et leurs exigences en matière de données. Abstraire la complexité de l’accès aux données — jeux de données volumineux, données versionnées, flux propriétaires ou sources multiples — afin que les notebooks restent simples à utiliser, portables et performants. Contribuer à faire le lien entre le code exploratoire produit dans un cadre de recherche et des solutions logicielles robustes, maintenables et adaptées à un environnement de production. Participer aux décisions d’architecture relatives aux environnements d’exécution, au sandboxing, à la scalabilité, à la reproductibilité et à la sécurité des traitements. Promouvoir de bonnes pratiques d’ingénierie logicielle, tout en tenant compte de la nature itérative et expérimentale des travaux de recherche.

RÉSUMÉ EXPRESS Data Engineer senior (4 ans+, Bac+5) pour construire et opérer les pipelines data d'une plateforme cloud de paiement à fort volume transactionnel. Il maîtrise Python/PySpark et Databricks en production, conçoit les architectures data lakehouse sur AWS (S3, Redshift), optimise les jobs Spark et garantit la fiabilité et la qualité des données pour les usages analytics et ML. Expérience fintech ou paiement fortement appréciée. 2 jours de télétravail par semaine / Anglais professionnel opérationnel obligatoire. MISSIONS PRINCIPALES Design & Construction des Pipelines Data Concevoir et construire les pipelines ETL/ELT d'ingestion, transformation et chargement depuis de multiples sources (terminaux POS, APIs, systèmes de paiement) Choisir les patterns adaptés selon les cas d'usage : batch vs streaming, data warehouse vs data lake vs lakehouse Développer en Python/PySpark avec des pratiques d'ingénierie logicielle solides (tests, packaging, code maintenable) Databricks & Optimisation Spark Construire et optimiser les workflows Databricks (Jobs, Delta Live Tables) en production sur des volumes significatifs Optimiser les jobs Spark : partitionnement, broadcast joins, caching, memory management, tuning des performances et des coûts Architecture Data & Stockage AWS Concevoir les structures de données et les patterns de stockage sur AWS (S3, Redshift, formats Parquet/Delta/Iceberg) Modéliser et optimiser les données dans Redshift (distribution keys, sort keys, requêtes analytiques) Gérer la sécurité des données dans un contexte de données de paiement sensibles (IAM, chiffrement, conformité) Fiabilité Production & Qualité des Données Assurer le monitoring et l'alerting des pipelines en production, intervenir sur les incidents (données manquantes, pipeline en retard, données corrompues) Mettre en place des contrôles de qualité des données (data validation, schema evolution, data lineage) Collaboration & Veille Travailler avec les data scientists pour comprendre leurs besoins et leur fournir des datasets de qualité pour le ML Assurer une veille technologique active sur les nouvelles technologies et best practices data

Lead Data Engineer / Lead Data Platform (H/F)Votre mission En tant que Lead Data, vous êtes responsable de la conception, de la fiabilité et de l’industrialisation de la plateforme data dans un environnement assurantiel fortement réglementé. Vous combinez un rôle de : référent technique, architecte data, lead d’équipe, garant de la qualité et de la sécurité des données. Vos responsabilitésLeadership & coordination Encadrer et accompagner une équipe de Data Engineers Définir les bonnes pratiques : qualité des données, documentation, monitoring, versioning Garantir la cohérence des choix techniques avec les équipes DevOps et Architecture Collaborer avec les équipes métiers (finance, actuariat, sinistres, marketing) Data Engineering Concevoir et maintenir des pipelines de données robustes et scalables Orchestrer les flux avec Apache Airflow Modéliser les données (schémas étoile / flocon) Garantir la performance, la sécurité et la traçabilité des données Industrialisation & DataOps Mettre en place les pratiques CI/CD pour les projets data Automatiser les tests et déploiements Superviser les traitements et gérer les incidents de production Travailler avec les équipes DevOps sur les environnements et la sécurité Profil recherché Formation supérieure en informatique ou data 7 à 10 ans d’expérience en Data Engineering Expérience significative en rôle de lead technique Une expérience en assurance, banque ou finance est appréciée Compétences indispensables SQL avancé Python Apache Airflow Git & CI/CD (GitLab CI, GitHub Actions, Jenkins…) Modélisation de données décisionnelles Bonne culture DataOps / industrialisation Compétences appréciées Spark / Databricks dbt Docker / Terraform Outils de data quality et observabilité Connaissance RGPD et données sensibles Soft skills Leadership et pédagogie Excellente communication Vision globale et sens des priorités Autonomie et rigueur Capacité à travailler avec des interlocuteurs techniques et métiers

Concevoir, développer et maintenir les pipelines de données, les modèles analytiques et les tableaux de bord décisionnels afin de garantir une donnée fiable, exploitable et performante pour les équipes métiers. ResponsabilitésData Engineering Concevoir et maintenir les pipelines ETL/ELT. Intégrer des données depuis différentes sources (API, bases SQL, ERP, CRM, fichiers, cloud). Optimiser les traitements de données et la performance des flux. Assurer la qualité, la fiabilité et la gouvernance des données. Mettre en place des tests, monitoring et alertes sur les pipelines. Participer à l’architecture data et aux choix techniques. dbt (Data Build Tool) Développer et maintenir les modèles dbt. Structurer les couches Bronze / Silver / Gold. Créer des tests de qualité et documentation dbt. Gérer les dépendances et transformations SQL. Industrialiser les déploiements CI/CD dbt. Power BI Concevoir des dashboards et rapports interactifs. Créer des modèles de données optimisés. Développer des mesures DAX avancées. Mettre en place la sécurité des accès (RLS). Optimiser les performances des rapports Power BI. Collaborer avec les métiers pour comprendre les besoins analytiques. Compétences techniques requisesObligatoires SQL avancé Power BI (Power Query, DAX, Modélisation) dbt Python ou autre langage scripting Data Warehouse (Snowflake, BigQuery, Redshift, Synapse…) Git / GitLab / GitHub ETL / ELT Modélisation de données Appréciées Airflow / Dagster Azure Data Factory / Microsoft Fabric Docker CI/CD Cloud AWS / Azure / GCP Méthodologies Agile

Contexte : La mission se déroulera en collaboration avec les autres équipes de la Data, au cœur de la plateforme Data. Cette équipe est composée d’un product owner, d’un data steward et de deux autres data ingénieurs. Notre stack technique est principalement constituée de Python, Spark, SQL pour les traitements de données, Airflow pour l’orchestration et Cloud Storage et Delta lake pour le stockage. La stack inclut aussi les services BigQuery, Dataproc, PubSub et Cloud Storage de la Google Cloud Platform et Terraform et Terragrunt pour la gestion de l’infrastructure. MISSIONS : 1. Collecter et centraliser les différentes sources de données non homogènes 2. Assurer la conformité et la sécurité des données 3. Participer aux initiatives de gouvernance des données En interaction avec les membres de l’équipe, la prestation consiste à : • Participer activement aux différentes phases de conception, de planification et de réalisation des tâches avec l’équipe • Construire et maintenir de pipelines data robustes et scalables • Accompagner les membres de l’équipe dans l’exploitation et le requêtage des données • Organiser et structurer le stockage des données • Mettre en place et maintenir des infrastructures scalables capable de répondre aux besoins et à l’accroissement rapide du volume de données • Construire et maintenir les workflows de la CI/CD • Partager avec les autres data ingénieurs pour appliquer les bonnes pratiques en vigueur • Assurer l’évolutivité, la sécurité, la stabilité des environnements • Participer aux différentes instances des data ingénieurs • Contribuer et veiller à la mise à jour de la documentation • Faire de la veille technologique active dans le domaine Profil & Expertises demandées : • Au moins 3 ans d’expérience en tant que Data Ingénieur dans un environnement data • Compétences solides en data : structures de données, code, architecture • Expériences dans la conception et la réalisation de pipelines data • Expériences dans un environnement du cloud Google (GCP) • Expériences intégrant BigQuery et Dataplex Universal Catalog • Expériences intégrant les langages Python et SQL • Expériences intégrant Spark • Expériences intégrant delta lake • Expériences intégrant Terraform et Terragrunt • Expériences intégrant Gitlab et Gitlab CI/CD • Expériences intégrant les méthodologies Agile : Scrum ou Kanban • Capacité à vulgariser et à communiquer sur des aspects purement techniques Niveau d’expertise attendu : Sénior : plus de 5 ans d’expérience significative dans le type d’expertise demandé dans le type d’expertise demandé

Intégré(e) dans les équipes Plateforme Data le/la consultant(e) aura pour mission de concevoir, développer et maintenir des solutions de traitement de données à grande échelle, en utilisant des technologies telles que BigQuery, BigTable, Apache Kafka et Apache Spark. Mais aussi contribuer à des projets Data en apportant son expertise sur les tâches suivantes : montée en compétence sur l'ETL BigL, participation à la réalisation de projets métier dans le cadre de la solution offline ELT in-House Big Loader et BDI/DBT,[Saut de retour à la ligne]Le/la consultant(e) travaillera en étroite collaboration avec les équipes de développement et de production afin de garantir la qualité et la performance des solutions mises en place.[Saut de retour à la ligne] Livrables : Accompagner techniquement les autres membres de l'équipe (juniors) Active participation aux choix d'architecture technique Livrer les composants

Intégré(e) dans les équipes Plateforme Data le/la consultant(e) aura pour mission de concevoir, développer et maintenir des solutions de traitement de données à grande échelle, en utilisant des technologies telles que BigQuery, BigTable, Apache Kafka et Apache Spark. Mais aussi contribuer à des projets Data en apportant son expertise sur les tâches suivantes : montée en compétence sur l'ETL BigL, participation à la réalisation de projets métier dans le cadre de la solution offline ELT in-House Big Loader et BDI/DBT, Le/la consultant(e) travaillera en étroite collaboration avec les équipes de développement et de production afin de garantir la qualité et la performance des solutions mises en place. Livrables : ● Accompagner techniquement les autres membres de l'équipe (juniors) ● Active participation aux choix d'architecture technique Livrer les composants