Find your next tech and IT Job or contract Data Engineering

Your search returns 311 results.
Permanent

Job VacancyLead Data Engineer H/F

Lùkla
Published on
Apache Airflow

40k-50k €
Rouen, Normandy
Nous recrutons pour une entreprise du secteur de l'assurance un ou une Lead Data Engineer pour concevoir, fiabiliser et industrialiser sa plateforme data. Vous combinerez expertise technique, conception d'architecture et accompagnement d'équipe. Vous veillerez à la qualité, à la sécurité et à la performance des données, en lien étroit avec les équipes IT et métiers. Vos missions Pilotage et leadership Accompagner une équipe de Data Engineers et, éventuellement, d'Analytics Engineers Définir et promouvoir les bonnes pratiques en matière de qualité, de documentation, de gestion de versions et de supervision des données Jouer un rôle de référent technique et garantir la cohérence des choix d'architecture, en collaboration avec les équipes DevOps et l'architecte d'entreprise Travailler avec les équipes métiers, notamment en actuariat, finance, gestion des sinistres et marketing, ainsi qu'avec les équipes IT Data engineering Concevoir et maintenir des pipelines de données robustes et évolutifs Orchestrer les flux de données avec Apache Airflow Modéliser et structurer les bases de données selon les besoins analytiques Garantir la performance, la sécurité et la traçabilité des données Industrialisation et DevOps Mettre en œuvre les pratiques CI/CD pour les projets data Automatiser les tests, les déploiements et les contrôles qualité Collaborer avec les équipes DevOps et Réseaux sur la gestion et la sécurisation des environnements Superviser les traitements et contribuer à la gestion des incidents data
View this job
Contractor

Contractor job[SCH] Data Engineer Hadoop - 1892

ISUPPLIER
Published on

10 months
350-420 €
Paris, France
La mission s'inscrit dans les évolutions du datalake CIO Office, en lien avec les équipes de production applicative et DevOps. Le consultant intervient sur le développement et le traitement des données ainsi que sur l'évolution de la plateforme Hadoop. L'enjeu principal est de mettre en œuvre de nouvelles ingestions et transformations tout en maintenant les pipelines de données. Missions : - Mettre en œuvre de nouvelles ingestions de données - Réaliser les opérations de data prep et de transformation des données - Maintenir les outils de gestion des pipelines de données - Faire évoluer les pipelines de données avec PySpark et le shell scripting - Adresser les demandes d'évolution de la plateforme à l'équipe DevOps - Rédiger des spécifications techniques claires et précises - Travailler dans un environnement agile Scrum - Collaborer avec les équipes de production applicative et DevOps - Explorer de nouvelles solutions et technologies - Analyser et résoudre des problèmes complexes liés au traitement des données Profil attendu : Le profil recherché dispose de 0 à 6 ans d'expérience et d'une excellente maîtrise de Hadoop, Python/PySpark et Hive. Une bonne connaissance de SQL, Git, Jenkins, Jira et du shell scripting sous Unix/Linux est nécessaire. La maîtrise de l'anglais à l'écrit comme à l'oral ainsi qu'une expérience des environnements agiles Scrum sont attendues.
View this job
Permanent

Job VacancySenior Data Engineer

█ █ █ ██ █ █
Published on
CI/CD
Ocaml
Python

London, England, United Kingdom

Imported from

Job from the tech market, identified automatically to give you a complete view of the opportunities.

Restricted access to the community

Join our platform to access the details of this job and get access to the best offers on the market.

View this job
Contractor
Permanent

Job VacancyData Engineer Sénior - Morphome

VISIAN
Published on
BigQuery
DBT
Google Cloud Platform (GCP)

1 year
Paris, France
ContexteMission consistant à développer une solution permettant aux chercheurs de transformer leurs analyses exploratoires en traitements fiables et réutilisables. MissionsDévelopper une solution logicielle pour la transformation d'analyses exploratoires en traitements fiables et réutilisables Collaborer avec des chercheurs et un Data Scientist dans un contexte de recherche Monter en compétence rapidement sur les outils spécifiques du projet Assurer la communication claire avec des profils non techniques Outils & Environnement & Compétences obligatoiresMaîtrise de GCP : GKE, IAM, GCS, BigQuery Python en production : conception modulaire (principes SOLID, architecture hexagonale ou équivalent), typage statique, tests unitaires/d'intégration Docker, Git et CI/CD avec expérience concrète de déploiement et de diagnostic (debugging pipelines) SQL, modélisation de données et définition de contrats de données (data contracts) Expérience cloud avec adaptation de modules Terraform existants (pas nécessairement de conception from scratch, mais capacité à faire évoluer un IaC existant) Réalisation agentique concrète : appels d'outils/API, gestion des erreurs, dans le cadre d'un projet réel ou d'un démonstrateur Compétences appréciées (Nice-to-have)Agents IA déjà déployés en production MCP, Claude Code GitLab CI Vertex AI / KFP et MLOps avancé Analyse statique de code Python (AST/LSP) Connaissances en imagerie médicale et histopathologie Soft skillsAutonomie et rigueur Communication claire, notamment avec des profils non techniques (chercheurs) et le Data Scientist Capacité à monter en compétence rapidement sur les outils spécifiques du projet Esprit de collaboration dans un contexte de recherche
View this job
Contractor

Contractor jobData Engineer expérimenté Snowflake / Cloud

LeHibou
Published on
Amazon Redshift
Gitlab
Kubernetes

3 months
500 €
Roubaix, Hauts-de-France
Notre client dans le secteur Banque et finance recherche un/une Data Engineer expérimenté Snowflake / Cloud H/F Description de la mission : Contexte Dans le cadre du développement de l'IA générative au sein de ses applications, l'organisation souhaite renforcer son chapitre Data / entrepôt de données afin de porter les évolutions de patterns liés à la plateforme Data Snowflake et de traiter les ingestions de données sur cette plateforme, qu'elles soient structurées ou non structurées. La mission s'inscrit dans la construction et l'industrialisation des fondations data des cas d'usage IA liés à la relation client, ainsi que dans la mise en place d'une plateforme de pilotage de la relation client. L'équipe couvre l'ensemble de la chaîne de valeur : collecte des données produites par la plateforme de centre de contacts et par les cas d'usage IA, structuration dans Snowflake, croisement avec les données du SI, et mise à disposition pour le pilotage du programme, le suivi de la qualité opérationnelle et l'amélioration des produits IA. Mission La mission consiste à concevoir, mettre en œuvre et industrialiser les modèles de données, pipelines d'ingestion et dispositifs de gouvernance nécessaires à l'exploitation des données d'interactions relation client dans Snowflake, en environnement Cloud, avec une forte composante qualité, pilotage et réutilisabilité. Le consultant interviendra également sur la conception de nouveaux patterns techniques liés à l'ingestion, la manipulation et la restitution de données, ainsi que sur l'accompagnement des équipes IT et métier dans le déploiement et la prise en main de la plateforme Data. Principales responsabilités Définir le modèle de données cible « relation client IA » dans Snowflake : schémas, bases, conventions et dictionnaire de données, en cohérence avec le modèle de reporting existant de la plateforme de centre de contacts Construire les déversements Amazon Connect vers Snowflake et les pipelines d'ingestion associés Compléter le modèle CTR natif avec les attributs des cas d'usage IA absents du modèle standard : résumé d'appel généré et modifié, motif retenu, latence, retours utilisateurs, puis indicateurs voicebot et chatbot selon la trajectoire produit Mettre en place les contrôles qualité, la supervision et les mécanismes de reprise des pipelines Croiser les données d'interactions avec les données des plateformes d'IA et des applications du SI afin de construire une vision consolidée relation client multi-produits Mettre en place la plateforme de pilotage de la relation client avec indicateurs de qualité et de quantité des interactions, en pilotage à chaud et à froid Intégrer les données issues des transcriptions et alimenter mensuellement les instances de pilotage du programme Définir les contrats d'interface avec les producteurs de données et les règles de gouvernance et de conformité, notamment sur les durées de conservation et les finalités analytiques Intégrer au modèle les futurs cas d'usage dès leur conception, notamment assistants conseillers, voicebot et chatbot Contribuer au cadrage des nouveaux besoins techniques liés à la plateforme Snowflake Participer à l'évolution de la plateforme Data sur les volets gouvernance, contrôles et automatisation Participer aux choix technologiques de l'offre à mettre en place Analyser les documents d'architecture des assets à faire évoluer et définir les nouveaux patterns d'architecture fonctionnelle, applicative et technique Documenter les patterns retenus à un niveau de détail suffisant pour leur réutilisation Accompagner les équipes dans la prise en main de la plateforme Data Environnement technique Data platform : Snowflake, DBT Langages : SQL, Python, Shell Cloud : AWS, Terraform Contact center : Amazon Connect Orchestration / notebooks / MLOps : Airflow, MLflow, Jupyter Conteneurs / plateforme : Kubernetes, EKS CI/CD et outillage : GitLab, Artifactory, SonarQube Architecture : architectures Data, architectures de flux, ingestion de données structurées et non structurées Sécurité et conformité : sensibilité aux problématiques de sécurité et normes associées Livrables attendus Modèle de données cible documenté avec dictionnaire Pipelines en production, supervisés et documentés, avec jeux de contrôle qualité Vision consolidée des données d'interactions exploitable dans Snowflake Plateforme de pilotage de la relation client alimentée avec indicateurs de qualité et de quantité, vues à chaud et à froid, et socle de KPIs mensuel pour les instances de pilotage Contrats d'interface et règles de gouvernance des données IA Profil recherché Expérience Profil expérimenté en Data Engineering sur plateforme Snowflake / Cloud Expérience avérée sur une plateforme Snowflake Capacité à travailler dans un contexte multi-site, multi-entité et international Compétences techniques Expertise Snowflake Maîtrise de SQL, Python et Shell Maîtrise de DBT Bonne connaissance des architectures Data et de leur écosystème Bonne maîtrise des architectures et services Cloud, avec AWS en priorité Connaissance de Terraform Maîtrise des architectures de flux Connaissance de Kubernetes / EKS Connaissance d'Airflow, MLflow et Jupyter Connaissance des chaînes CI/CD : GitLab, Artifactory, SonarQube Sensibilité aux problématiques de qualité de données, de gouvernance, de sécurité et de conformité Compétences personnelles Capacité à mobiliser, fédérer et créer une vision commune Bonne communication écrite et orale Langues Anglais lu et parlé de manière professionnelle Compétences / Qualités indispensables : Snowflake, SQL et Python, AWS / Cloud, Modélisation de données, Pipelines d'ingestion data, Qualité et gouvernance des données Informations concernant le télétravail : Oui — 2 jours/semaine
View this job
Permanent

Job VacancyData Engineer (H/F)

ADSearch
Published on

33k-40k €
Marignane, Provence-Alpes-Côte d'Azur
En bref : Data Engineer (F/H) - CDI - Marignane - Salaire 35-40k brut annuel Notre client, PME dans le domaine industriel, recherche un Data Engineer (F/H) pour développer son activité à Marignane. Vos missions : - Concevoir, développer et maintenir les pipelines de données (ETL/ELT) permettant la collecte, la transformation et le chargement des données depuis diverses sources. - Modéliser et optimiser les architectures de données (data warehouse, data lake) en lien avec les besoins métiers. - Garantir la qualité, la fiabilité et la performance des flux de données (monitoring, tests, gestion des erreurs). - Industrialiser et automatiser les traitements de données en respectant les bonnes pratiques de développement (versioning, CI/CD, documentation). - Travailler en étroite collaboration avec les Data Analysts, Data Scientists et équipes métiers pour comprendre leurs besoins et mettre à disposition des données exploitables. - Participer à la mise en place et à l'évolution des outils et technologies data (bases de données, orchestrateurs, outils de streaming). - Assurer la sécurité et la conformité des données traitées (gouvernance, RGPD). - Optimiser les performances des requêtes et des traitements (tuning, indexation, partitionnement). - Documenter les architectures, les flux de données et les processus mis en place. - Assurer une veille technologique sur les outils et pratiques data engineering.
View this job
Permanent

Job VacancySr Data Engineer/Architect

█ █ █ ██ █ █
Published on
Data management
DevOps
Python

City of Bristol, United Kingdom

Imported from

Job from the tech market, identified automatically to give you a complete view of the opportunities.

Restricted access to the community

Join our platform to access the details of this job and get access to the best offers on the market.

View this job
Contractor

Contractor jobData Engineer Teradata et Datavisualisation

LeHibou
Published on
Control-M
IBM DataStage
Linux

12 months
750 €
Villejuif, Ile-de-France
Notre client dans le secteur Banque et finance recherche un/une Data Engineer Teradata et Datavisualisation H/F Description de la mission : Contexte Dans le cadre de la construction et du développement d'applications reposant sur de puissantes plateformes data, la mission s'inscrit au sein d'une tribu Data intervenant pour des usages variés au service des directions métier d'un établissement bancaire. L'équipe est au cœur de la stratégie data et intervient sur l'architecture data, les technologies data récentes, le Big Data, l'IA, Teradata, SAS, DMP, Oracle ainsi que sur les solutions analytiques et de datavisualisation. La mission se déroule au sein de la squad Paiements, avec des interactions régulières avec les métiers, les autres squads de la tribu et les autres tribus IT. Mission La mission consiste à intervenir en tant que Data Engineer sur un périmètre orienté Teradata et datavisualisation, en assurant à la fois la gestion des incidents, les évolutions applicatives, la coordination des acteurs, la modélisation des données et la préparation des mises en production. Principales responsabilités Gérer les incidents, définir les plans d'actions, assurer le suivi et la communication associée Piloter les projets et évolutions sur le périmètre concerné, en maîtrisant les étapes d'étude data, de tests, de recette et de mise en production Réaliser la modélisation des données Accompagner les métiers dans la mise à disposition et l'exposition des données répondant à différents besoins Concevoir et développer les applications du périmètre Accompagner le changement et coordonner les différents acteurs du projet ou des évolutions Préparer les mises en production : feuille de route, mode opératoire, réservation des ressources, mise à jour du cahier d'ordonnancement, création des jobs Control-M, création du DED Assurer la coordination de tous les acteurs du périmètre Environnement technique Data / SGBD : Teradata, SQL, Teradata SQL Assistant, Teradata Studio, Oracle, SAS, DMP ETL / Chargement : BTEQ, TPT, DataStage Ordonnancement : Control-M Systèmes / Scripting : UNIX, Linux, Shell, Python Outils collaboratifs et documentaires : Git, Jira, Confluence, MEGA, Zeenea Méthodologies : Agile Domaines : Data, datavisualisation, paiements, domaine bancaire Livrables attendus Compte-rendu individuel d'activité Compte-rendu de réunion Documentation actualisée et procédures Documents de suivi Dossier d'architecture technique Dossier d'étude détaillée Dossier de sécurité Documentation technique Fiches d'anomalies Liste d'actions signalées Programme documenté Résultats de tests Dossier de conception de mise en œuvre Dossier de mise en place Dossier de diagnostic de l'existant PV de recette Profil recherché Expérience Profil expérimenté disposant de 3 à 7 ans d'expérience Expérience en environnement bancaire Capacité à intervenir sur des projets data avec interaction directe avec les métiers et coordination transverse Compétences techniques Maîtrise de Teradata Très bonne maîtrise de SQL sur SGBD relationnel, notamment Teradata Maîtrise des modes de chargement dans l'entrepôt via BTEQ Bonne maîtrise de TPT Connaissance de Control-M Maîtrise de l'environnement UNIX Compétences en Shell, Python et Linux Pratique des outils Git, Jira, Confluence, MEGA et Zeenea Connaissance de DataStage Compétences personnelles Sens du service Bon relationnel et bonne communication écrite et orale Écoute Esprit d'analyse et de synthèse Capacité d'organisation et d'adaptation Capacité à travailler en équipe Autonomie Curiosité Compétences / Qualités indispensables : Teradata, SQL, BTEQ / TPT, Control-M, Shell / Python / Linux, Coordination avec les métiers Compétences / Qualités qui seraient un + : Mission similaire dans le secteur bancaireInformations concernant le télétravail : Présence sur site requise minimum 2 jours par semaine
View this job
Contractor
Permanent

Job VacancyData Engineer Confirmé (H/F)

WINSIDE Technology
Published on
Apache Airflow
BigQuery
Gitlab

1 year
40k-41k €
380-390 €
Lille, Hauts-de-France
Démarrage : ASAP Localisation : Lille (59) avec 3 jours sur site/semaine Pour le compte d'un grand acteur international du secteur retail, nous recherchons un Data Engineer confirmé pour rejoindre une équipe Data pluridisciplinaire au sein d'un environnement cloud à forte volumétrie. Le contexte : Vous intégrerez une équipe composée de Data Engineers et d'experts DevSecFinOps, intervenant sur des projets stratégiques liés à la Supply Chain et à la valorisation de la donnée. Vous contribuerez à la conception, au développement et au maintien de solutions Data tout en participant à une démarche FinOps visant à optimiser les coûts d'exploitation des plateformes cloud. Vos missions : Build Participer aux projets Data liés aux enjeux Supply. Concevoir des solutions alignées avec les standards et frameworks Data de l'entreprise. Développer et modéliser les flux de données sous la gouvernance des architectes Data. Contribuer au développement d'applications Data. Réaliser les tests et validations techniques. Assurer le suivi et le reporting de vos activités. Run Maintenir en conditions opérationnelles plusieurs référentiels de données multi-sources ainsi que différentes applications Data. Gérer les incidents et demandes de support. Assurer les mises en production via les outils de CI/CD. Superviser et suivre les flux de données. Expertise Monter progressivement en compétence sur le système d'information et les domaines métiers associés. Participer à l'amélioration continue des pratiques Data et FinOps. Environnement technique : ✅ GCP ✅ BigQuery ✅ Apache Airflow ✅ Terraform ✅ GitLab ✅ Datalake ✅ Exposition de données / APIs Data ✅ Google Data Studio ✅ Python ✅ Shell
View this job

Connecting Tech-Talent

Free-Work, THE platform for all IT professionals.

Free-workers
Resources
About
Recruiters area
2026 © Free-Work / AGSI SAS
Follow us