Find your next tech and IT Job or contract Apache Spark

Dans le cadre d’un programme stratégique de transformation Data pour un de nos clients, nous recherchons un(e) Tech Lead / Senior Solution Architect Databricks afin d’accompagner la modernisation et l’industrialisation d’une plateforme Data Azure à forte volumétrie. Vous interviendrez dans un environnement exigeant autour des enjeux suivants : • Migration et industrialisation sur Databricks • Gouvernance et qualité des données • Optimisation des performances et des coûts cloud (FinOps) • Accompagnement et montée en compétence des équipes Data 🎯 Vos missions : Data Engineering & Plateforme Data Concevoir et développer des pipelines d’ingestion à forte volumétrie Structurer et faire évoluer une plateforme Data moderne sur Azure Databricks Mettre en œuvre des traitements batch et streaming dans une architecture Lakehouse Industrialisation & DevOps Industrialiser les pipelines et renforcer les pratiques DevOps Mettre en place les bonnes pratiques CI/CD et automatiser les déploiements Participer à la fiabilisation des environnements de production Architecture & Gouvernance Définir l’architecture cible et garantir les standards techniques Accompagner les équipes sur les bonnes pratiques d’ingénierie Data Participer aux sujets Data Governance & Data Quality Performance & FinOps Optimiser les traitements Spark Maîtriser les coûts d’infrastructure cloud Améliorer les performances globales de la plateforme MCO & Support Intervenir sur des incidents complexes (support N3) Contribuer au maintien opérationnel de la plateforme

Contexte : migration de On premise vers GCP En tant que Data Engineer, vous serez au cœur de notre stratégie data. Vous concevrez et mettrez en œuvre des solutions innovantes pour collecter, transformer et stocker nos données massives. Votre expertise technique sera essentielle pour les projets et offrir des insights précieux à nos équipes métiers. Vos missions : Conception et développement: Définir et mettre en œuvre des architectures de données robustes (data lakes, data warehouses). Concevoir et développer des pipelines de données automatisés (ETL). Optimiser les performances des traitements de données. Technologies: Maîtrise des langages de programmation : Python, Scala, SQL. Expérience avec les outils de traitement de données : Spark, Hadoop, Kafka. Connaissance des bases de données relationnelles et NoSQL. Expérience avec les clouds (GCP) Collaboration: Travailler en étroite collaboration avec les équipes métiers. Participer à la définition de la roadmap data.

Nous recherchons pour le compte de notre client Grand-compte en finance un Data Engineer confirmé. Missions : • Travailler au sein de notre équipe d’ingénierie des données pour identifier et mettre en œuvre les solutions de données (cloud) les plus optimales pour nos clients et/ou nos projets internes • Gérer les environnements et être responsable de la fourniture d’un support et d’un service proactifs et de haute qualité • Si nécessaire : résoudre les incidents, identifier leur cause première, corriger et documenter les problèmes, et mettre en œuvre des mesures préventives Vous accompagnez les membres de l’équipe moins expérimentés dans leur développement, en les aidant à relever les défis en leur présentant les meilleures pratiques et en leur montrant comment mettre en œuvre et exploiter une solution de manière efficace • Vous formez les équipes à la mise en œuvre de nouvelles initiatives, en dispensant les formations associées selon les besoins Votre profil : • Un état d’esprit « Agile » ; vous êtes un fervent défenseur de la méthodologie DevOps et avez déjà travaillé avec la chaîne d’outils DevOps . Cela inclut l’infrastructure en tant que code, la gestion des artefacts, la gestion des vulnérabilités, la gestion de Git et le pipeline CI/CD ; • Passionné(e) de technologie et d’open source, vous aimez explorer et découvrir en permanence de nouvelles solutions cloud natives ; • Autonome tout en ayant l’esprit d’équipe, vous vous épanouissez dans un rôle exigeant où un haut niveau de compétence est nécessaire • Bonnes compétences en communication et capacité à interagir efficacement avec les clients • Capacité avérée à collaborer avec des équipes pluridisciplinaires composées d’analystes métier, de développeurs, d’analystes de données et d’experts fonctionnels • Passionné(e) par l’excellence dans le travail et soucieux(se) du détail • Maîtrise de l’anglais (à l’oral et à l’écrit) et du français • Capacité à anticiper et résoudre les problèmes avant qu’ils n’affectent la productivité de nos clients • Souhaitable : expérience dans la mise en œuvre et l’exploitation d’applications basées sur des conteneurs (Docker) ;

Contexte / Objectifs : 1. Développement de Pipelines de Données : o Concevoir, développer et optimiser des jobs Spark (Java) pour le traitement, la transformation et l'agrégation de grands volumes de données provenant de diverses sources. o Implémenter des flux de données robustes et performants sur Cloudera. o Utiliser HBase pour des besoins de stockages NoSQL rapides et l'accès à des données structurées/semi-structurées. o Développer des requêtes SQL complexes sur HIVE/SPARK pour l'extraction, l'analyse et la validation des données. 2. Optimisation et Performance : o Monitorer la performance des jobs Spark et identifier les goulots d'étranglement. o Optimiser les requêtes SQL et les stratégies de lecture/écriture sur HDFS et HBase. o Proposer et implémenter des solutions pour améliorer la scalabilité et l'efficacité de la plateforme. 3. Assurance Qualité et Déploiement (DevOps) : o Écrire des tests unitaires et d'intégration pour garantir la qualité du code. o Participer aux processus de Build et de déploiement via les outils CI/CD (Jenkins, XLD). o Intégrer des outils d'analyse de code statique (SonarQube, Checkmarx) dans le cycle de développement. o Gérer les dépendances et les versions avec Maven. 4. Collaboration et Documentation : o Documenter le code, les architectures et les processus. o Partager les bonnes pratiques et contribuer à l'amélioration continue de l'équipe.

Dans le cadre de la modernisation de son système de gestion des données, notre client recherche un(e) Data Engineer afin de participer à la transformation et à l’industrialisation de ses traitements data. Vous intégrerez une équipe technique engagée sur des projets stratégiques liés à la migration d’applications historiques vers des technologies Big Data et Cloud plus performantes et évolutives. Vos missions Participer à la migration de traitements décisionnels développés sous Informatica et PL/SQL vers des solutions Big Data basées sur Spark (Java). Assurer la maintenance corrective et évolutive des traitements existants afin de garantir leur stabilité et leur performance. Concevoir, développer et optimiser des pipelines de données dans un environnement Cloud moderne autour de Databricks. Industrialiser les traitements data afin d’améliorer leur fiabilité, leur automatisation et leur exploitabilité. Développer et maintenir des flux de données performants répondant aux besoins métiers et techniques. Collaborer avec les différentes équipes projets pour comprendre les besoins fonctionnels et proposer des solutions adaptées. Participer aux phases de tests, de validation et de mise en production des traitements. Contribuer à l’amélioration continue des pratiques de développement et d’exploitation des plateformes data. Veiller à la qualité, à la cohérence et à la disponibilité des données au sein des environnements de production.

Je recherche un Intégrateur d'exploitation / Ingénieur Devops pour intégrer l' équipe APS Trade est en charge du support de l'ensemble des applicatifs Front, Middle et Back-Office Trade utilisées par les métiers Documentary Products : moyens de paiement et financement du commerce international, c'est-à-dire credits documentaires, remises documentaires, et garanties internationales. Il y actuellement 9 applications basées sur des progiciels (iVision, FileNet, Connexis Trade, AML-TF,...) du développement offshore et onshore, de l'infrastructure Microsoft (SharePoint, MSSQL, BI, ...), TIBCO, ... Des instances sont dédiées par métier et à l'international. La mission consiste à assister, qualifier, comprendre les différents besoins et façons de mettre en œuvre nos applications en production. En gardant à l'esprit qu'il y a un utilisateur au bout. Tout cela dans le respect du suivi via les outils mis à disposition. Vos missions Pilotage technique & fonctionnel: Coordination de l'équipe offshore (Inde), gestion du planning, priorisation, KPIs, remontée des alertes et relation DEV/OPS. Chaînes CI/CD & automatisatio: Mise en place des pipelines de DEV à PROD, automatisation des déploiements, des tests et des batchs avec consignes associées. Intégration & exploitation: Installation des systèmes, analyse des dossiers d'exploitation, rédaction des procédures, maintien des conditions de production. Surveillance & qualité de service: Mise en place des surveillances applicatives, garantie des SLA, amélioration continue et contribution aux choix d'évolution. Move To Cloud (IVx): Participation active au programme de migration cloud — intégration des standards industrialisés Stack technique : RHEL, Shell Unix, Kubernetes Tomcat Oracle DB Jenkins Argo CD Ansible Bitbucket Autosys Spark Dynatrace Apigee Confluence SharePoint / O365

Nature de la mission Pilotage technique d’une squad (organisation, priorisation, rituels) Industrialisation CI/CD et mise en œuvre GitOps Conception d’architectures cloud, conteneurisées et data Gouvernance technique, standards et documentation Supervision performance, observabilité et sécurité Compétences / technos Kubernetes, GitOps ( ArgoCD, Helm, GitLab CI/CD ) Cloud / infra ( OpenStack, Ceph ) Observabilité ( Prometheus, Grafana, Loki ) Data : Kafka, Airflow, Iceberg, Trino, Spark Développement : Java (Quarkus), Python Profil lead/senior avec expérience environnements critiques 📅 Démarrage Août / septembre 2026 Modalités Localisation : Bordeaux (présence requise, télétravail partiel) Temps plein obligatoire Profils expérimentés / seniors attendus Missions longues durées

Contexte de la mission Amundi Technology recherche un profil Data Engineer Senior orienté plateformes Data & IA afin d’accompagner la montée en puissance de son socle Data/ML. La mission s’inscrit au sein de l’équipe DAT, responsable des plateformes Data, IA/ML et des environnements Kubernetes du groupe. Le consultant interviendra dans un contexte très orienté production et scalabilité, avec une forte proximité avec les équipes d’ingénierie de production. L’objectif n’est pas uniquement de conseiller, mais d’intervenir concrètement sur les problématiques techniques, les optimisations de plateformes et l’industrialisation des usages Data/IA. Informations clés • Localisation : Paris 15e • Démarrage : ASAP / Mai 2026 • Durée : longue visibilité (3 ans) • Présence : 100% • Horaires : HO uniquement • Télétravail : non précisé • Type de mission : expertise opérationnelle / engineering plateforme Responsabilités principales Plateformes Data & IA • Optimisation et amélioration des plateformes Dagster et Trino en production • Analyse de performances, tuning, optimisation des usages et configurations • Conception et optimisation de pipelines Spark à forte volumétrie • Gestion des problématiques de partitionnement, formats Delta Lake / Iceberg et performance des traitements • Participation à l’évolution du socle Data/IA et aux choix d’architecture techniques • Contribution à la gouvernance technique et aux standards d’engineering Industrialisation & Scalabilité • Industrialisation des pipelines Data & ML • Mise en place des mécanismes de monitoring, observabilité et alerting • Construction des patterns de déploiement à l’échelle • Gestion des problématiques de montée en charge et de robustesse plateforme • Support niveau 3 sur les incidents complexes Data/IA Accompagnement technique • Accompagnement des équipes Data Science et Développement • Pair-working et rôle de référent technique opérationnel • Réalisation de POCs et veille technologique autour des plateformes Data & IA Environnement technique Data / Big Data • Dagster • Trino • Apache Spark • Hive • Delta Lake / Iceberg • Superset • OpenMetadata Cloud / Infra • Kubernetes • Rancher RKE • AKS Azure • Docker DevOps / Observabilité • ArgoCD • Jenkins • Grafana • Prometheus • Sysdig Langages • Python • Go Versioning / Storage • GitLab • Artifactory • S3 Compétences indispensables • Très forte expertise sur des plateformes Data en production • Expertise Dagster (ou équivalent orchestration Data) • Expertise Trino / moteurs distribués • Solide maîtrise Apache Spark et optimisation de pipelines Big Data • Bonne connaissance Delta Lake / Iceberg / Hive • Expérience réelle de problématiques de scaling plateforme • Très bon niveau Python • Bonne maîtrise Linux / Unix Compétences appréciées • Kubernetes / Docker • Azure AKS • GitOps / Infrastructure as Code • MLOps • Go ou Java

Contexte de la mission Dans le cadre de la gestion et de l’évolution de ses plateformes Data, notre client recherche un Responsable RUN Data & BI afin d’assurer le pilotage opérationnel des activités Décisionnel, Big Data et Business Intelligence. Rattaché au Responsable du pôle Plateformes de Données et Applications Data, le consultant interviendra en tant que relais opérationnel sur l’ensemble des activités de maintien en conditions opérationnelles des plateformes Data et contribuera à garantir la qualité de service du système d’information tout au long du cycle de vie des solutions. Le poste s’inscrit dans un environnement stratégique où les enjeux de disponibilité, de performance, de qualité de service et d’accompagnement de la transformation des équipes sont majeurs. Missions principales Pilotage opérationnel des activités Data Assurer le maintien en conditions opérationnelles des plateformes Décisionnel, Big Data et BI ; Piloter directement les opérations et plans d’actions associés ; Garantir le respect des engagements de service et des niveaux de qualité attendus ; Identifier, qualifier et remonter les alertes ainsi que les risques opérationnels ; Assurer le suivi des incidents, problèmes et actions correctives ; Veiller à la bonne exécution des processus opérationnels au quotidien. Gouvernance & Pilotage Construire et suivre les feuilles de route opérationnelles ; Élaborer les plannings détaillés des projets et activités ; Assurer le suivi des budgets, plans de charge et capacités ; Produire les tableaux de bord de pilotage et indicateurs clés (KPI) ; Préparer et animer les instances de gouvernance : COPIL ; COMOP ; ateliers de suivi ; Produire les reportings périodiques à destination des parties prenantes. Management transverse & accompagnement des équipes Animer les équipes du pôle Data ; Accompagner les collaborateurs dans leur montée en compétences ; Participer à la transformation des activités et des méthodes de travail ; Être force de proposition sur l’amélioration continue des processus et de l’organisation ; Apporter une analyse critique sur les résultats, les méthodes et les orientations proposées. Gestion des risques & qualité de service Mettre les risques sous contrôle et suivre les plans de remédiation ; Construire et maintenir les cartographies de risques ; Définir et suivre les plans de mitigation ; Garantir le respect des procédures qualité et sécurité du SI ; Assurer la cohérence des solutions mises en œuvre avec les besoins métiers. Contribution à la stratégie Data Participer à la définition des orientations Data et Décisionnel ; Contribuer à la déclinaison opérationnelle des feuilles de route Data ; Garantir la pertinence des solutions mises en œuvre vis-à-vis des besoins métiers ; Participer aux projets d’évolution des plateformes et outils Data.

Dans le cadre d’un programme stratégique de modernisation Data, nous recherchons un(e) Senior Data Engineer Microsoft Fabric pour intervenir sur un projet de migration d’envergure de Google Cloud Platform (GCP) vers Microsoft Fabric. Vous jouerez un rôle clé dans la mise en œuvre technique de la plateforme cible et participerez à la conception et au développement de pipelines de données robustes, scalables et performants. Vous intégrerez une équipe Data experte évoluant dans un environnement Cloud Azure moderne, Agile et orienté excellence technique. Vos missions En tant que Senior Fabric Engineer, vous serez responsable de : Concevoir et développer des pipelines d’ingestion et de transformation de données avec Microsoft Fabric Data Factory et Dataflows Gen2 Mettre en œuvre la migration des données depuis Google BigQuery vers les environnements Fabric Lakehouse et Data Warehouse Développer des connecteurs et workflows d’intégration pour différentes sources : SAP, Salesforce, Oracle, fichiers, APIs, SFTP, etc. Participer à la réécriture des traitements ETL existants sous Talend vers Microsoft Fabric Optimiser les pipelines de données afin de garantir performance, fiabilité et maîtrise des coûts Réaliser les revues de code et accompagner les profils plus juniors Participer aux cérémonies Agile : daily meetings, sprint planning, rétrospectives Garantir la qualité du code et le respect des standards de développement et de CI/CD

Nous recherchons pour le compte de notre client dans le domaine de la retraite, Responsable MCO Data, BI et Big Data Objectif : le pilotage du maintien en condition opérationnelles des activités Décisionnel, Big Data et Bureau , et contribuer à garantir la qualité de service du système d'information tout au long du cycle de vie des solutions data. Missions : Rattaché au responsable du pôle Plateformes de données et Applications Data, au sein de l’entité Valorisation de la donnée, le profil aura pour principales missions : • Piloter directement des opérations (plans d’action spécifiques) • Planifier les projets et mettre les risques sous contrôle • Être en capacité de qualifier et de remonter les alertes le cas échéant • Animer les équipes du pôle • Assurer la maîtrise des délais, des plans de charge et des budgets définis • Garantir le respect des procédures et méthodes d’assurance de qualité et de sécurité du SI • Garantir l’atteinte des objectifs fixés en termes de niveau de service • Apporter une analyse critique sur les méthodes de travail et les résultats envisagés • Contribuer à la définition des orientations de la DSI-RC et à leur déclinaison opérationnelle pour les domaines fonctionnels SI Décisionnel et Big Data • Garantir la pertinence du SI mis en œuvre pour répondre aux objectifs Métier définis par la MOA ainsi que de la bonne exécution des process au quotidien • Accompagner les équipes dans la transformation de leur activité et dans leur montée en compétence.

Contexte de la mission Description du besoin : La mission consiste à concevoir et faire évoluer les solutions existantes ou prévisionnelles. Faire évolution des solutions Bigdata et le maintien en conditions opérationnelles des socles Hadoop Cloudera Hors-Prod et Prod et la participation aux projets d’évolution technique de ces socles. Activités principales : - Participer aux projets d’évolution pour le Socle Hadoop existant : - évolutions logicielles et matérielles, sécurité, amélioration de l’existant, évolution des fonctionnalités techniques ou fonctionnelles; - la participation attendue peut se situer sur le pilotage, la définition d’architecture et la rédaction des dossiers et la mise en œuvre; - Participer au MCO du socle Hadoop: - Administration et exploitation: supervision, optimisation, gestion des incidents et des performances ; - support expertise aux équipes Etudes et exploitation - Participer au projet de nouvelle solution de type Plate-forme DATA: - Etude d'impact, préconiser les choix techniques, définir les standards et normes, rédiger le dossier d'architecture technique; - Mise en oeuvre; - Mise en production: transfert de connaissances aux équipes exploitation, rédaction des procédures d'administration et dossiers d'exploitation Les compétences recherchées sont autour de la solution Hadoop et des plateforme DATA, mais les compétences supplémentaires sur d’autres solutions Data comme le décisionnel seront très appréciées. La mission nécessite une totale autonomie mais aussi la capacité à s'intégrer et travailler en équipe. Des astreintes ou interventions ponctuelles en HNO pourront être ponctuellement demandées.