Trouvez votre prochaine offre d’emploi ou de mission freelance ETL (Extract-transform-load)

Vous aimez les pipelines de données qui tournent en production, et les reprendre pour qu'ils tournent mieux ? Rejoignez l'équipe technique Big Data de la banque de financement et d'investissement d'un grand groupe bancaire. L'équipe est transverse : elle construit et fait vivre les traitements de données de cinq domaines métier (risques, financement du commerce international, conformité, finance, ESG), soit une quinzaine d'applications. Le datalake, entièrement Hadoop et hébergé sur les serveurs de la banque, a repris l'ancien entrepôt de données des prêts, lettres de crédit et garanties, dont les chaînes ETL avaient été recopiées telles quelles. La feuille de route 2026-2027 : sortir de l'ETL et réécrire les workflows en code. Vous intervenez sur le périmètre du financement du commerce international (trade finance). Vos principales missions : Développer et optimiser les pipelines de données en PySpark sur la plateforme Hadoop (HDFS, Hive, Iceberg). Analyser les workflows Informatica existants et les réécrire en code, en réutilisant les composants transverses de l'équipe. Rationaliser les traitements pour réduire les coûts d'exploitation et les incidents de production. Préparer l'ordonnancement Control-M avec l'équipe de production applicative. Proposer des évolutions de l'existant : dans la plupart des cas, l'équipe choisit la refonte plutôt que le maintien du legacy. Ce que la mission vous apporte : Un chantier de fond : la sortie d'un ETL au profit du code, sur deux ans. Une plateforme Big Data en production, avec des données bancaires sensibles et des utilisateurs métier exigeants. Une équipe qui attend qu'on remette en cause l'existant et qui décide en conséquence.

Contexte Dans le cadre de la transformation du système d'information du Groupe et de la modernisation de sa plateforme Data Hub, la Direction Transformation SI recherche un expert Data Platform afin de renforcer les équipes du Socle Data. Cette mission s'inscrit dans plusieurs chantiers stratégiques : • Mise en œuvre d'une approche Data Driven. • Accompagnement des travaux liés à la montée de version de la plateforme Cloudera. • Maintien en condition opérationnelle de la plateforme Data Hub du Groupe . • Accompagnement des évolutions technologiques autour des architectures événementielles. • Étude et intégration de technologies Lakehouse. • Travaux d'interopérabilité entre plateformes Data. • Réflexions autour des modèles de partage de données (Data Sharing). • Préparation de scénarios d'hybridation et d'évolution vers des approches proches du Data Mesh. L'objectif est d'accompagner les équipes métiers, projets et d'exploitation dans la mise en œuvre et l'évolution des services de la plateforme Data Hub. MISSIONS : • L'évolution technique de la plateforme Data Hub. • La modernisation des services Data mis à disposition des consommateurs. • La réussite du projet de montée de version Cloudera. • Le support expert de niveau 3 sur les incidents de production. • L'amélioration continue de la robustesse, des performances et de la sécurité de la plateforme. • L'industrialisation et l'automatisation des processus d'administration et d'exploitation. Sous la responsabilité du Product Owner du domaine et piloté par un backlog de demandes, le prestataire sera amené à : Études et expertise • Réaliser des études techniques d'évolution autour de l'écosystème Cloudera. • Analyser les impacts techniques et fonctionnels des évolutions envisagées. • Produire des dossiers d'architecture et notes de cadrage. • Présenter les conclusions et recommandations aux responsables techniques et métiers. Exploitation et support expert • Assurer le support de niveau 3 sur l'ensemble de la plateforme Data Hub. • Participer aux cellules de crise lors d'incidents majeurs de production. • Réaliser les analyses de causes racines et définir les plans de remédiation. • Accompagner les équipes d'exploitation DataOps N2. __________ Interventions • Possibilité d'interventions en Heures Non Ouvrées (HNO). • Participation à des opérations sensibles de production. __________ Environnement technique Expertise obligatoire • Cloudera CDP • Administration et exploitation de clusters Hadoop Cloudera • Maintien en condition opérationnelle de plateformes Data • Support expert N3 Niveau avancé • Linux Red Hat Enterprise Linux (RHEL) • Ansible • AWX • Talend • Scripting Shell Compétences appréciées • Kubernetes • Docker • Git • GitLab • Jenkins • OpenShift • Terraform • Python • Java • Scala __________ Activités d'exploitation La mission comprend : • Support N3 • Gestion des incidents de production • Participation aux cellules de crise • Gestion des changements • Capacity Planning • Performance Tuning • Maintien en condition opérationnelle • Sécurisation et durcissement des systèmes • Interventions HNO ponctuelles __________ Profil recherché Séniorité • Consultant confirmé __________ Critères de sélection Critères obligatoires • Expérience significative sur Cloudera CDP. • Expérience d'administration et d'exploitation de plateformes Hadoop. • Expertise Linux RHEL. • Expérience en support de production de niveau 3. Critères différenciants • Expérience Data Driven / Data Mesh. • Connaissance des architectures événementielles. • Connaissance des solutions Lakehouse. • Connaissance des environnements Kubernetes et OpenShift. • Expérience dans des environnements critiques à forts enjeux de disponibilité.

Dans le cadre du développement d'une société innovante spécialisée dans les solutions SaaS dans l'industrie, nous recherchons un Data Platform Engineer / Analytics Architect capable de piloter la modernisation complète d'une plateforme analytics stratégique. Basée à Toulouse, cette entreprise développe des solutions permettant de digitaliser les opérations industrielles, automatiser les tests complexes et exploiter les données de production afin d'améliorer la qualité, les coûts et les délais de développement de systèmes critiques. Vous prendrez la responsabilité de la refonte d'une plateforme de données exploitant plusieurs années d'historique industriel. Vos missions : Migration vers ClickHouse Concevoir le nouveau modèle de données. Définir les stratégies de partitionnement et de rétention. Sélectionner les moteurs adaptés (MergeTree, ReplicatedMergeTree, etc.). Mettre en œuvre les Materialized Views. Organiser la migration depuis InfluxDB sans interruption de service. Garantir la performance et la scalabilité de la plateforme. Refonte de l'architecture Data Auditer l'ETL existant. Identifier les composants à conserver, simplifier ou remplacer. Mettre en place une architecture pérenne et maintenable. Optimiser les flux d'ingestion et de transformation. Gouvernance et qualité des données Cartographier les différentes sources de données. Définir les règles de qualité et de conservation. Produire la documentation technique associée. Mettre en place les bonnes pratiques de gestion des données. Grafana & Observabilité Migrer les tableaux de bord existants. Créer de nouveaux dashboards adaptés aux besoins métiers. Optimiser les requêtes et la visualisation des données. Déployer l'alerting et le provisioning as code. Accompagnement des équipes Formaliser les choix d'architecture. Rédiger la documentation technique. Assurer le transfert de compétences auprès des équipes internes. Les compétences techniques Data, ClickHouse, SQL avancé, Modélisation de données temporelles, Kafka, Vector, Telegraf, ETL / ELT, Visualisation, Grafana, Infrastructure, Kubernetes, Infrastructure as Code, Cloud, dbt, InfluxDB, Prometheus

Contexte de la missionDans le cadre du développement et de l'optimisation de sa plateforme Data, nous recherchons un Consultant Snowflake confirmé pour accompagner les équipes techniques dans la gestion, l'intégration et la valorisation des données. Missions principalesConcevoir, développer et optimiser des solutions Data sur Snowflake. Mettre en place et maintenir des pipelines d'intégration de données (ETL/ELT). Développer et optimiser des requêtes SQL complexes. Assurer la qualité, la fiabilité et la performance des données. Participer à la migration et à l'intégration des données vers Snowflake. Collaborer avec les équipes Data Engineers, Data Analysts et métiers. Contribuer à l'amélioration continue de l'architecture Data.

Ingénieur de production Vitrolles Septembre SQL, Oracle, MongoDB, PostgreSQL, MariaDB. Scripting : Shell/KSH, Python. Infrastructure et systèmes : Linux, Unix, Kubernetes, OpenStack, KVM, AWS. Middleware : Kafka, Tomcat, Nginx, Node.js, Hazelcast. DevOps et déploiement : Git, GitLab CI/CD, Helm, Terraform, SaltStack, Ansible, Rancher. Observabilité : Grafana, Prometheus, Loki, Alerta. Ordonnancement et ETL : Control-M, PowerCenter. Synthèse de la mission Dans un contexte DevOps, la mission consiste à assurer le maintien en conditions opérationnelles des applications de la verticale « Clients » Les principales activités sont : Exploitation et supervision des applications afin de garantir leur disponibilité et la continuité de service. Homologation et mises en production des applications, notamment en préproduction (VABFO). Gestion opérationnelle des incidents, problèmes, changements et configurations selon les processus ITIL. Développement et maintenance des pipelines et des outils de déploiement. Automatisation et amélioration continue des environnements et des services applicatifs. Suivi et reporting auprès du manager opérationnel. Compétences techniques requises Bases de données : SQL, Oracle, MongoDB, PostgreSQL, MariaDB. Scripting : Shell/KSH, Python. Infrastructure et systèmes : Linux, Unix, Kubernetes, OpenStack, KVM, AWS. Middleware : Kafka, Tomcat, Nginx, Node.js, Hazelcast. DevOps et déploiement : Git, GitLab CI/CD, Helm, Terraform, SaltStack, Ansible, Rancher. Observabilité : Grafana, Prometheus, Loki, Alerta. Ordonnancement et ETL : Control-M, PowerCenter. Qualités personnelles Esprit d'équipe et rigueur. Esprit d'analyse et capacité de synthèse. Curiosité technologique et volonté d'apprendre. Bonne gestion du stress en environnement de production. Capacité à communiquer et à rendre compte.

Vos missions Vous interviendrez notamment sur : L'analyse et l'optimisation des performances des jobs Talend ; La gestion et l'évolution des tables d'extraction SAP ; La mise en place de bases de données en remplacement de traitements reposant actuellement sur des fichiers ; La documentation des jobs et des optimisations réalisées ; La coordination des activités BI et des différents flux Data extraits de SAP ; La prise en charge et l'évolution de l'architecture BI ; L'identification des problématiques en amont et la proposition de solutions adaptées.

Dans le cadre d'un programme de transformation et de modernisation d'une plateforme Data stratégique, nous recherchons un Expert Data Platform confirmé pour renforcer une équipe en charge d'un Data Hub d'entreprise. Tu interviens à la fois sur l'évolution technique de la plateforme, son maintien en conditions opérationnelles, le support expert de niveau 3 et les travaux de modernisation autour des architectures Data. Tes missions principales : Réaliser des études techniques autour de l'écosystème Cloudera CDP Accompagner les travaux de montée de version de la plateforme Analyser les impacts techniques et fonctionnels des évolutions envisagées Produire des dossiers d'architecture et notes de cadrage Présenter les recommandations aux équipes techniques et métiers Assurer le support N3 sur la plateforme Data Participer aux cellules de crise lors d'incidents majeurs Réaliser les analyses de causes racines et définir les plans de remédiation Accompagner les équipes d'exploitation DataOps Participer au maintien en conditions opérationnelles de la plateforme Contribuer au Capacity Planning et au Performance Tuning Participer à la gestion des changements Renforcer la sécurité et le durcissement des environnements Industrialiser et automatiser les activités d'administration et d'exploitation Contribuer aux réflexions autour des architectures événementielles, Lakehouse, Data Sharing et hybridation des plateformes Data

Le bénéficiaire souhaite une prestation d'accompagnement dans l'objectif d'assurer une mission dans le cadre de notre transition vers une architecture Data Mesh. Nous recherchons un(e) Data Product Engineer spécialisé(e) dans le développement de pipelines sur la plateforme Talend Real Time BigData et de data products sur la plateforme Starburst. Votre mission sera de concevoir, collecter, intégrer, construire et opérer des jeux de données fiables, auto-descriptifs et interopérables, en collaboration avec les domain métiers et les data owners. Missions clés : - Conception de flux de données et de Data Products Développement des pipelines d'intégration de données optimisés via la Talend Data Fabric / Talend Real Time BigData ou encore Spark / Astronomer Documentation des pipelines d'ingestion de données Intégration des données dans l'écosystème Data Mesh Collaboration avec les domaines métiers pour identifier les sources de données et les cas d'usage. Développement des data products / data sets (vues & vues matérialisées) répondant à des cas d'usage identifiées avec les responsables de domaines métiers Développement des requêtes SQL optimisées pour Starburst (push-down predicates, partitionnement, formats de fichiers comme Iceberg/Parquet). Documentation les data products (métadonnées, ownership, qualité) Contribution à l'amélioration continue des data produts dans de la plateforme Starburst Mise en place des alertes et des dashboards pour le suivi des data products.

Je recherche en urgence un profil Directeur de projet pour une mission de 6 mois + embauche client si possible. Je recherche un(e) Directeur/Directrice de Projet spécialisé(e) dans la Data. Ce service est responsable du socle Data / IA (décisionnel, BI, Data Science). Il intervient sur les dimensions techniques des projets Décisionnel / Data / IA ainsi que dans la définition des solutions répondant aux besoins des métiers. Description du poste Le/la prestataire sera rattaché(e) au responsable du service Modélisation des Données. Programme de migration DataPlatform Le programme a pour objectif de migrer le système d'information décisionnel actuel vers une DataPlatform SaaS. Le rôle du/de la prestataire sera d'animer et de piloter les cinq chantiers constituant ce programme. L'équipe projet est composée : d'un Product Owner en charge de la migration des chaînes ETL et des rapports (COGNOS et Power BI) ; de Tech Leads ; d'analystes et de développeurs. Éléments pratiques Démarrage : fin novembre / début décembre 2026 ; Durée : 3 mois renouvelables, potentiellement jusqu'au T1 2028 ; Télétravail : présence obligatoire sur site 3 jours par semaine, après une période initiale en présentiel complet et selon le degré d'autonomie.

Intitulé : Ingénieur BI / Data Visualisation – Spotfire & Looker Poste : 1 MissionsConcevoir, développer et maintenir des tableaux de bord BI. Développer et faire évoluer les reportings sous TIBCO Spotfire. Concevoir des dashboards et analyses sous Looker. Intégrer et traiter différentes sources de données. Optimiser les performances des requêtes et tableaux de bord. Assurer la maintenance et le support des solutions BI. Recueillir les besoins métiers et les traduire en solutions de reporting. Compétences indispensablesTIBCO Spotfire Looker SQL Data Visualisation / Dashboarding Modélisation et analyse de données Environnement BI / Reporting Compétences complémentaires à rechercherLookML Python GCP / BigQuery ETL / ELT APIs / intégration de données Profil recherchéProfil Ingénieur BI / Consultant BI / Data Visualization Engineer ayant une expérience concrète sur Spotfire et Looker.

Notre client, acteur majeur du secteur des services, recherche son futur Ingénieur Data SQL Server (H/F) pour son site de Balma, afin de renforcer son équipe en charge des environnements et traitements de données. Vos missions : Intégré à une équipe en interaction avec les équipes Data, applicatives et métiers, vous devrez : * Concevoir, développer et maintenir les traitements de données du SI. * Développer et optimiser des requêtes et traitements sous SQL Server, T-SQL et SSIS. * Analyser les besoins métiers et proposer des solutions Data adaptées. * Administrer et optimiser les environnements SQL Server. * Diagnostiquer et résoudre les incidents liés aux bases et traitements. * Participer aux projets d'amélioration de la performance, de sécurisation et d'évolution des environnements. * Garantir la qualité, la cohérence et la disponibilité des données. * Enrichir la documentation technique et fonctionnelle. Les compétences techniques * ### Mandatory * SQL Server : maîtrise confirmée de l'écosystème Microsoft SQL Server. * T-SQL : développement de requêtes complexes, procédures stockées, fonctions et scripts. * SSIS : conception, développement, maintenance et évolution de packages ETL. * Administration SQL Server : exploitation et maintien en conditions opérationnelles des bases. * Optimisation / Performance Tuning : analyse des performances, optimisation des requêtes, index et plans d'exécution. * ETL et traitements de données : conception et supervision de flux d'intégration et de transformation. * Gestion des incidents : diagnostic et résolution des anomalies liées aux bases et traitements de données. * Modélisation de données : compréhension et conception de modèles relationnels. * Qualité et fiabilité des données : contrôle de cohérence, disponibilité et sécurisation des traitements. * Git / gestion de versions : utilisation d'un outil de versioning dans un environnement de développement. * Documentation technique : capacité à documenter les traitements, flux, procédures et composants du SI. ### Nice to have * SSRS / SQL Server Reporting Services : conception ou maintenance de reportings. * Oracle : connaissance ou expérience d'environnements Oracle. * Expérience des problématiques de montée de version SQL Server. * Connaissance des problématiques de sécurité et conformité des données. * Expérience sur des environnements avec des enjeux importants de volumétrie et de performance. * Utilisation d'outils d'IA pour le développement, notamment Claude Code. * Connaissance du secteur de l'assurance. * Expérience sur des sujets de pilotage commercial / reporting métier.

Nous recherchons un Data Engineer Référent pour rejoindre les équipes Data d'un grand groupe industriel leader du secteur automobile. Vous serez responsable de la conception, du développement et de la maintenance des architectures d'intégration de données, en soutien direct aux équipes d'Analytics et de Research & Development dans un environnement agile structuré à l'échelle (SAFe). En tant que référent technique, vous piloterez la transformation des données brutes en données exploitables pour les produits numériques d'innovation et serez le point d'appui des Data Engineers du domaine pour l'adoption des meilleures pratiques de développement. Votre rôle combine développement avancé, mentorat technique et maintien de standards élevés au sein de l'équipe. L'environnement technique repose sur une stack moderne combinant Python, Talend et Java Spring Boot pour les traitements ETL, avec une intégration continue stricte et une gouvernance des données centralisée. Vous évoluerez dans une organisation matricielle en collaboration étroite avec les équipes métier (feature teams) et le Tech Lead du domaine, dans un contexte de transformation digitale en R&D. Responsabilités : - Concevoir et développer les traitements d'intégration et de transformation de données en Python et Talend, ainsi qu'en Java Spring Boot selon les besoins - Assurer la modélisation des données, l'optimisation des flux ETL et le respect des normes de qualité et de sécurité des données - Piloter l'intégration des développements dans les chaînes CI/CD, de l'automatisation des tests à la mise en production - Définir et valider les plans de tests, conduire les tests unitaires automatisés et les tests de qualification fonctionnelle - Rédiger et maintenir la documentation technique (architecture, API, processus) et fonctionnelle pour garantir la traçabilité et le transfert de connaissance - Encadrer et accompagner les Data Engineers du domaine dans l'adoption des nouvelles pratiques, méthodologies et outils - Assurer le support de niveau 3 sur les traitements d'alimentation du lac de données et résoudre les incidents critiques - Collaborer activement en environnement agile (SAFe/Scrum), en étroite coordination avec les feature teams et les parties prenantes métier - Participer à l'amélioration continue des processus, de l'architecture et des standards au sein de l'équipe Data Télétravail : 3 jours par semaine minimum sur site Localisation : Clermont-Ferrand

🌟 Quel sera ton poste ? 🌟 📍Lieu : Niort (79) 🏠 Télétravail : 2 jours par semaine 📝Contrat : Freelance Portage ou CDI 👉 Contexte client : Dans le cadre du renforcement d'une équipe, nous recherchons un(e) Data Analyst disposant d'une bonne maîtrise de Talend et SQL, pour intervenir sur un environnement décisionnel. Tu auras pour missions de : Rédiger les spécifications techniques à partir des besoins fonctionnels Participer à la définition, à la modélisation et à la structuration des données Développer et faire évoluer des flux ETL sous Talend Réaliser des développements et traitements sur SQL Server Préparer, nettoyer et mettre en qualité les données Réaliser des traitements de préparation de données sur les différents domaines couverts Maintenir et faire évoluer les traitements récurrents, avec une logique de rationalisation et d'automatisation Assurer la maintenance applicative Réaliser les tests unitaires et mettre en œuvre les tests d'intégration Préparer les recettes, les jeux de données et exécuter les plans de tests Préparer les environnements de recette et rédiger les dossiers de mise en exploitation Veiller au respect des normes et bonnes pratiques de développement Livrer les solutions et accompagner les utilisateurs dans leurs usages Participer aux différentes cérémonies Agile de la squad et de la tribu Maintenir la documentation technique et les cahiers de tests. Compétences indispensables : Talend SQL / SQL Server SGBDR SQL Developer / DBeaver GitLab Environnements serveurs Bonne compréhension des architectures décisionnelles Modélisation et structuration des données Microsoft Office 365 Outils complémentaires : Jira GLPI La connaissance d'un ordonnanceur constitue un plus.

Pour un grand groupe bancaire, au sein de la DSI des activités de marché, vous rejoignez une équipe récemment créée qui construit une solution de data visualisation et de suivi en temps réel des risques de marché et du P&L pour des desks de dérivés de taux. Vos missions : Développer de nouvelles mesures de risque dans la couche Atoti, à partir des flux Kafka issus de l'ETL (trades, intraday, market data) Accompagner les Business Analysts dans la construction des dashboards Atoti : projections de risques, explain P&L Contribuer avec le Tech Lead au déploiement du cube OLAP sur plusieurs sites internationaux Assurer les tests, les mises en production et la documentation