Trouvez votre prochaine mission ou futur job IT.

ContexteDans le cadre du renforcement de son équipe Data & IA, notre client recherche un Data Engineer / Administrateur Plateforme Data pour assurer l'administration, l'exploitation et l'évolution des infrastructures Data basées sur Cloudera CDP et les technologies Open Source. Vous interviendrez sur des plateformes critiques en collaboration avec les équipes applicatives, infrastructures, métiers et internationales afin de garantir la disponibilité, les performances et l'évolution des environnements Data. MissionsAdministration & ExploitationAdministrer et maintenir les plateformes Data Cloudera CDP. Garantir le maintien en condition opérationnelle des infrastructures. Superviser les plateformes et assurer le traitement des incidents. Participer aux astreintes et aux interventions hors horaires ouvrés. Optimiser les performances et la capacité des plateformes. Data EngineeringConcevoir les solutions d'ingestion de données (API). Mettre en œuvre des architectures de stockage (Hadoop, Ozone, Druid, ClickHouse...). Développer et automatiser les traitements de données. Mettre en place les tests unitaires et d'intégration. Industrialiser les traitements de nettoyage et de transformation des données. Évolution des plateformesParticiper aux migrations des clusters Hadoop Cloudera. Contribuer au déploiement des nouvelles plateformes Cloudera Data Services sous OpenShift/Kubernetes. Être force de proposition sur les évolutions techniques. Participer au design des infrastructures Data. Support & ExpertiseRésoudre les incidents complexes (Hive, Spark, Yarn...). Accompagner les équipes applicatives et métiers. Assurer un support technique de haut niveau. Participer à la documentation et au partage de connaissances. Environnement techniqueImpératifCloudera CDP 7.1.x RedHat Enterprise Linux 8 & 9 Python Java Ansible DevOps Très bonnes connaissancesHadoop Hive HBase Kafka Spark Solr Knox Ranger ZooKeeper Kerberos LDAP AppréciéesOpenShift Kubernetes Trino / Starburst Airflow Flink Maven Gradle ClickHouse Ozone Druid Profil recherchéFormation Bac+5 en informatique ou équivalent. Expérience significative sur des plateformes Big Data Cloudera. Expertise Linux RedHat. Bonne maîtrise des environnements Open Source Data. Solides compétences en automatisation (Ansible). Connaissances DevOps. Capacité à analyser et résoudre des incidents complexes. Esprit d'équipe, autonomie et bonnes capacités de communication. ConditionsCouverture de l'équipe : 8h00 – 19h00 Astreintes et interventions hors horaires ouvrés selon un planning de rotation. Niveau attendu : Confirmé / Senior (N4). Compétences clés : Cloudera CDP 7.1.x, RedHat 8/9, Hadoop, Spark, Hive, Kafka, Python, Java, Ansible, DevOps, OpenShift, Kubernetes.

Contexte de la mission : Dans le cadre d'un programme de transformation digitale et data, notre client recherche un(e) Senior Data Engineer afin de renforcer une équipe en charge du développement de produits data stratégiques au sein d'un Cloud Center of Excellence et d'un Digital Accelerator. La mission se déroule dans un environnement international et vise à concevoir, développer et faire évoluer une plateforme data ainsi que les produits associés, tout en contribuant à l'amélioration continue des pratiques d'ingénierie et d'industrialisation des données. Objectifs et livrables : Le/la consultant(e) aura pour principales missions de : · Concevoir, développer et maintenir des pipelines de données ETL/ELT. · Développer et industrialiser les traitements de transformation de données. · Concevoir et faire évoluer des Data Lakes, Data Warehouses, Data Marts et cubes de données. · Intégrer différentes sources de données (API, fichiers, traitements batch et temps réel). · Optimiser les performances des traitements et des requêtes SQL. · Mettre en œuvre les bonnes pratiques de développement, d'intégration et de déploiement. · Collaborer avec les équipes Produit, Data, Plateforme et Product Owners. · Participer aux phases de cadrage et de Data Discovery. · Mettre en place et maintenir les chaînes CI/CD dédiées aux workflows data. · Évoluer dans un environnement Agile. Livrables attendus : · Développement et déploiement des composants data. · Documentation technique et fonctionnelle. · Documentation des modèles de données. · Rapports d'audit et de contrôle qualité. · Rapports de tests d'acceptation. · Support technique et transfert de compétences. Compétences requises : · Solide expérience en Data Engineering. · Maîtrise des architectures ETL/ELT. · Excellente maîtrise de SQL. · Expérience sur Microsoft SQL Server (SSIS, SSAS, PBIRS). · Connaissance des architectures Data Warehouse et Data Lake. · Développement de pipelines de données. · Optimisation des performances (Performance Tuning). · Maîtrise d'outils ETL tels que Talend, Azure Data Factory (ADF) ou SSIS. · Expérience des chaînes CI/CD avec Azure DevOps ou GitLab. · Expérience en environnement Agile.

Mission de l'équipe : Au sein d'une équipe dédiée au Stress Testing et à la Data Analytics, la mission consiste à concevoir, industrialiser et fiabiliser les traitements de données utilisés dans le cadre des exercices réglementaires de stress testing, des projections prudentielles et des reportings associés. L'équipe évolue dans un environnement Big Data et intervient sur l'ensemble de la chaîne de valeur de la donnée, depuis l'intégration des sources jusqu'à la production de livrables conformes aux exigences réglementaires, avec un niveau élevé de qualité, de traçabilité et de reproductibilité. Dans le cadre de la préparation de l'EBA Stress Test 2027, l'équipe renforce sa capacité d'exécution sur le périmètre Credit Risk, notamment pour la construction du point de départ réglementaire, l'automatisation des traitements et la sécurisation des livraisons.

Rôle : Data Engineer Senior Databricks / GCP TJM : 430 € / jour Localisation : Meudon (3 jours par semaine sur site / 2 jours de télétravail) Date de début : ASAP Durée de la mission : Jusqu'au 31/12/2026 Contexte de la missionAu sein d'une équipe pluridisciplinaire (chefs de projet, architectes, DevOps, Data Engineers), vous interviendrez sur la conception et le développement de projets d'intégration de données à forte valeur ajoutée. Vos principales responsabilités incluent : Développement de jobs d'intégration de données en PySpark, Spark et Python (modes streaming et batch) sur la plateforme Databricks. Mise en œuvre du CI/CD (GitHub, DevOps, Databricks Asset Bundles), de l'orchestration, du data management et de la sécurité. Optimisation des jobs existants et des ressources Cloud (GCP et Databricks). Mise en place de Dashboards FinOps afin de suivre et piloter l'usage des ressources GCP / Databricks. Participation aux astreintes et au support en production de l'application. Assurer une formation continue, le partage de connaissances et la rédaction de la documentation technique. Compétences clés requisesDatabricks : Excellente maîtrise de l'administration, de la gestion des catalogues (Unity Catalog), de Delta Lake et de l'optimisation des performances. Technologies Data : Maîtrise approfondie de PySpark, Spark, Python, SQL et GIT. Cloud (GCP) : Bonne connaissance de l'écosystème Google Cloud Platform, notamment GCS, Pub/Sub, GKE et les outils d'Alerting. Qualités professionnellesEsprit d'équipe, curiosité intellectuelle et envie d'évoluer dans un environnement collaboratif. Excellente capacité à communiquer, à vulgariser et à partager vos connaissances avec les différents membres de l'équipe.

Bonjour, Nous recherchons un Data Engineer Senior – GCP / DB2 / SQL. Informations clés📍 Localisation : Lyon (2 jours sur site / semaine) 📅 Démarrage : ASAP 📆 Durée : Longue mission 💰 TJM maximum : 400 € ContexteAu sein d'une Digital Factory, vous interviendrez sur un projet stratégique autour du calcul, de la diffusion et du contrôle des prix de vente. Vous serez en charge du développement et de la maintenance des pipelines de données ainsi que du maintien en conditions opérationnelles d'applications Legacy. MissionsConcevoir, développer et maintenir les pipelines de données. Assurer les traitements de transformation et d'orchestration des données sur GCP. Développer et optimiser les traitements SQL sur de gros volumes de données. Construire des tableaux de bord sous Looker Studio. Maintenir deux applications Legacy en conditions opérationnelles. Garantir la qualité, la fiabilité et la performance des flux de données. Compétences indispensablesGCP (BigQuery) SQL avancé DB2 Dataform Data Engineering & orchestration de données Compétences appréciéesPub/Sub GitLab CI/CD Docker Compose Linux Git Méthodologie Agile (Scrum) Profil recherchéPlus de 7 ans d'expérience en Data Engineering. Solide expertise en SQL et environnements Cloud GCP. Capacité à travailler sur des architectures Data complexes et à forts volumes. Bon niveau de communication et esprit d'équipe. Une expérience dans le secteur du retail / grande distribution est un plus.

Nous recherchons un Data Engineer confirmé ou senior pour intervenir sur une plateforme data moderne reposant sur Snowflake et dbt, avec une forte exigence en modélisation Data Vault. Contexte de la mission : Vous rejoindrez une équipe Data en charge de structurer et faire évoluer une architecture analytique robuste et scalable. La mission s'inscrit dans une logique d'industrialisation, de qualité et de standardisation des flux. Missions principales Concevoir et implémenter des modèles Data Vault (obligatoire). Développer et optimiser les transformations via dbt. Modéliser et structurer les données dans Snowflake. Participer à la définition des standards d'architecture et des bonnes pratiques. Assurer la qualité, la performance et la traçabilité des données. Collaborer avec les équipes BI (notamment Power BI) et métiers.

Pour l'un de nos clients grands comptes du secteur bancaire, nous recherchons un Développeur Java Spring Senior orienté Cloud Azure afin d'accompagner les évolutions d'une plateforme Data stratégique hébergée sur Azure. La mission s'inscrit dans un contexte de modernisation du socle technique, d'automatisation et d'industrialisation des déploiements sur Kubernetes (AKS). Vos missionsDévelopper et faire évoluer une application de gestion du Data Lake Azure. Concevoir des micro-services interfacés avec les API Azure et les systèmes internes. Participer à l'automatisation du cycle de vie applicatif (CI/CD). Déployer et maintenir les composants sur Azure Kubernetes Service (AKS). Contribuer à l'amélioration de la résilience, de la sécurité et de la scalabilité de la plateforme. Intervenir sur un environnement de production critique et fortement sécurisé. Environnement techniqueIndispensable : Java 11+/17 Spring / Spring Boot Azure Cloud Kubernetes / AKS Docker Azure DevOps Git Apprécié : Azure SDK Java Temporal Liquibase PostgreSQL / SQL Server Azure Data Lake Storage Gen2 (ADLS) Réseaux Azure (VNet, Subnet, Private Endpoint, DNS privé) Stack ELK Spark Profil recherché5 ans d'expérience minimum en développement Java. Forte expérience Cloud Azure. Maîtrise des architectures micro-services. Expérience significative de Kubernetes / AKS en environnement de production. Culture DevOps et CI/CD. Autonomie, capacité à travailler dans des environnements complexes et forte sensibilité aux problématiques de sécurité et de disponibilité.

Dans le cadre du renforcement d'une équipe dédiée à l'innovation et à l'industrialisation de solutions d'Intelligence Artificielle, nous recherchons un(e) Data Engineer / Développeur Fullstack Python Junior souhaitant évoluer sur des sujets mêlant Data Engineering, IA Générative et développement logiciel. Vous intégrerez une équipe à taille humaine intervenant sur des projets déjà en production autour du traitement documentaire, du Machine Learning et de l'IA générative. Vous participerez notamment à : Développer des applications et pipelines de traitement de données en Python. Concevoir et maintenir des traitements distribués autour des technologies Big Data. Participer au développement d'outils intégrant des modèles d'IA générative. Contribuer à l'amélioration continue des chaînes CI/CD ainsi qu'à l'automatisation des tests. Développer des interfaces et outils facilitant l'exploitation des solutions IA. Collaborer étroitement avec les équipes Data Engineering, Data Science et les métiers afin de transformer rapidement les besoins en solutions opérationnelles. Participer à la mise en production et à l'industrialisation des développements.

Basée à Lille, Lyon, Nantes, Grenoble, Marseille, Paris et Bruxelles, Insitoo Freelances est une société du groupe Insitoo, spécialisée dans le placement et le sourcing des Freelances IT et Métier. Depuis 2007, Insitoo Freelances a su s'imposer comme une référence en matière de freelancing par son expertise dans l'IT et ses valeurs de transparence et de proximité. Actuellement, afin de répondre aux besoins de nos clients, nous recherchons un Data Ops Engineer (H/F) à Lille, France. Les missions attendues par le Data Ops Engineer (H/F) : Accélérer le parcours DataOptimiser le cycle de vie complet des pipelines data, en réduisant considérablement les frictions depuis l'installation locale jusqu'au déploiement en production. Promouvoir l'Inner SourceCo-développer, industrialiser et standardiser les initiatives issues de la communauté (par exemple : wrappers YAML personnalisés, templates CI/CD, hooks pre-commit, solutions avancées d'observabilité). Facilitation transverseÊtre le référent technique permettant d'aligner les pratiques d'ingénierie locales avec les standards globaux de développement logiciel. Excellence d'ingénierie et conception technique nouvelle générationIngénierie augmentée par l'IAPiloter l'évolution du développement des pipelines en intégrant des outils d'IA (Copilots, automatisations GenAI) dans le quotidien des ingénieurs data. Optimisation des boucles de feedbackConcevoir des patterns, outils et frameworks permettant un développement local fluide, des tests efficaces et une validation rapide. Excellence logicielle (Software Craftsmanship)Promouvoir les pratiques modernes au sein de l'ingénierie data, notamment : les contrats de données (data contracts), des chaînes CI/CD robustes, les tests automatisés, une supervision et un monitoring homogènes. Challenge, conseil et alignementPréparer l'avenir et faire évoluer la stratégieRemettre constamment en question les paradigmes existants afin de préparer les prochaines étapes de maturité : transition vers un Open Lakehouse, optimisation des coûts (FinOps), intégration de la confidentialité et de la conformité (RGPD by design), support de modèles de données avancés. Représenter la voix de la communautéÊtre le principal porte-parole des besoins de la communauté des ingénieurs data.

Basée à Lille, Lyon, Nantes, Grenoble, Marseille, Paris et Bruxelles, Insitoo Freelances est une société du groupe Insitoo, spécialisée dans le placement et le sourcing des Freelances IT et Métier. Depuis 2007, Insitoo Freelances a su s'imposer comme une référence en matière de freelancing par son expertise dans l'IT et ses valeurs de transparence et de proximité. Actuellement, afin de répondre aux besoins de nos clients, nous recherchons un Data Ops Engineer (H/F) à Lille, France. Les missions attendues par le Data Ops Engineer (H/F) : - Garantir une visibilité universelle (Observabilité) : Intégrer des standards ouverts (comme OpenLineage) au cœur de notre plateforme. L'objectif est de cartographier la traçabilité de bout en bout, de monitorer la fiabilité des données et d'automatiser la remédiation en cas d'anomalie, quels que soient les outils utilisés par les métiers. - Tracer le golden path des développeurs (DevEx) : Concevoir des bibliothèques, des utilitaires d'automatisation et des briques logicielles autonomes dotées de capacités agentiques. Ce dispositif permettra de supprimer les frictions du cycle de mise en production.

Dans le cadre de l'évolution de sa plateforme analytique, nous recherchons actuellement un.e Expert ClickHouse / Data Platform Engineer pour intervenir chez l'un de nos clients du secteur des télécommunications. Vous rejoindrez une équipe en charge de la chaîne de valorisation des données télécom, dont le cœur repose sur une plateforme ClickHouse alimentée par des pipelines d'ingestion Kafka. Votre mission consistera à faire évoluer cette plateforme, optimiser ses performances et accompagner les équipes dans leur montée en compétence. 🎯 Votre rôle En tant qu'Expert ClickHouse, vous prenez en charge l'administration, l'optimisation et l'évolution de la plateforme analytique. Au-delà de votre expertise technique, vous jouez un rôle de référent auprès des ingénieurs de l'équipe en assurant le transfert de compétences, la documentation et la pérennisation des bonnes pratiques. Vos missions📊 Administration & évolution de la plateforme ClickHouse Vous intervenez sur le cœur de la plateforme de valorisation des données. À ce titre, vous serez amené.e à : Reprendre en main la configuration et l'exploitation de la plateforme ClickHouse. Administrer et optimiser les bases de données analytiques en production. Concevoir et faire évoluer les modèles de données. Optimiser les performances des requêtes sur des volumes de données importants. Gérer les stratégies de partitionnement, les moteurs MergeTree et les vues matérialisées. Participer à la refonte des schémas de données et des pipelines d'alimentation. ⚙️ Data Engineering & industrialisation Vous contribuez à l'évolution de l'architecture de données. Vos principales responsabilités seront de : Maintenir et faire évoluer les pipelines développés en Python. Participer aux flux d'ingestion de données via Kafka. Mettre à jour les scripts SQL associés aux traitements analytiques. Participer à l'industrialisation de la plateforme. Assurer la qualité, la fiabilité et les performances des traitements. 🤝 Mentorat & accompagnement technique Vous accompagnez les équipes dans leur montée en compétence. Dans ce cadre, vous serez chargé.e de : Former et accompagner les ingénieurs de l'équipe sur ClickHouse. Documenter les architectures, procédures et bonnes pratiques. Assurer le transfert de connaissances afin de garantir la pérennité de la plateforme. Participer aux réflexions d'architecture et aux choix techniques. 🧭 Environnement technique🛠 Technologies ClickHouse Python SQL Kafka Grafana Apache Superset Pipelines de données Modélisation analytique MergeTree Vues matérialisées Connaissances appréciées : C Lua

Nous recherchons un(e) Lead Data Platform Engineer pour rejoindre une Digital Factory innovante et contribuer à la conception et au développement d'une plateforme d'ingestion de données moderne et évolutive. Missions principales Concevoir et développer une plateforme d'ingestion de données générique en Python sur Microsoft Fabric. Automatiser les pipelines de données et garantir leur qualité et leur fiabilité. Déployer et gérer l'infrastructure avec Docker, DBT, SQL et des outils DevOps (CI/CD, monitoring, alerting). Collaborer étroitement avec les équipes Data & IA pour industrialiser les nouveaux cas d'usage. Compétences requises Expertise avancée en Python et son écosystème (Poetry, Pytest, Pandas). Maîtrise de Docker, SQL, Git, et des bonnes pratiques DevOps (CI/CD). Expérience avec Microsoft Azure (Microsoft Fabric est un plus). Expérience en ingestion et transformation de données à grande échelle. Bon relationnel, esprit collaboratif et veille technologique active. Profil recherché 5 à 8 ans d'expérience en tant que Platform Engineer / Data Engineer avec une forte appétence pour la construction de plateformes de données. Expérience dans un environnement cloud (Azure idéalement). Une expérience dans la création de plateformes d'ingestion in-house serait un vrai plus.

🌐 ContexteDans le cadre de l'accompagnement d'un acteur majeur du secteur de l'assurance dans sa transformation Data, nous recherchons un(e) Data Engineer Senior / Lead Data pour renforcer une équipe Data basée à Niort. Vous intégrerez une équipe travaillant sur des sujets stratégiques autour de la valorisation de la donnée, de l'industrialisation des produits Data et de l'évolution des plateformes décisionnelles. 🎯 Vos missionsVous interviendrez notamment sur : Concevoir, développer et industrialiser des solutions Data (ETL/ELT) Construire et faire évoluer des produits Data à destination des métiers Participer à la transformation des outils et plateformes Data Développer des traitements et flux de données robustes Réaliser la modélisation des données (MCD, MLD, modèles dimensionnels) Concevoir et optimiser des DataWarehouses et DataMarts Réaliser des requêtes SQL complexes Accompagner les équipes métiers et Product Owners dans la définition des solutions Garantir l'industrialisation, la qualité et la maintenabilité des solutions développées 🛠️ Environnement techniqueDataiku Tableau Business Objects SQL ETL / ELT DataWarehouse / DataMart Python apprécié GitLab / outils de gestion de versions

Data & AI Engineer (Data Engineering / AI Engineering) Qui sommes-nous ? Fondée par des experts techniques et portée par des passionnés de l'IT, Big APPS est une société de conseil spécialisée dans la Data, le Cloud, le DevOps et l'Intelligence Artificielle (IA). Nous accompagnons nos clients dans leurs projets de transformation digitale en concevant des plateformes de données performantes et des solutions innovantes basées sur l'IA. Nous intervenons sur des projets à forte valeur ajoutée en mettant en œuvre les technologies les plus récentes et les meilleures pratiques du marché. Dans le cadre de notre croissance, nous recherchons un(e) Data & AI Engineer pour renforcer nos équipes. Vos missions En tant que Data & AI Engineer, vous serez amené(e) à : Concevoir, développer et maintenir des plateformes de données robustes et évolutives. Développer et optimiser des pipelines de données (ETL/ELT). Concevoir des architectures Data sur Azure, AWS ou GCP. Préparer, transformer et valoriser les données pour les projets d'IA. Développer, intégrer et industrialiser des modèles de Machine Learning et d'IA générative. Participer au déploiement des modèles en production (MLOps). Collaborer avec les équipes métiers, Data Science et Cloud. Mettre en œuvre les bonnes pratiques DevOps, CI/CD et Infrastructure as Code. Garantir la qualité, la sécurité et la disponibilité des données. Que vous soyez Data Engineer, AI Engineer, Data Scientist ou déjà doté(e) d'une double compétence Data & IA, vous souhaitez intervenir sur des projets innovants mêlant Data Engineering, Machine Learning, IA Générative et Cloud ? Rejoignez Big APPS !

Contexte de la mission Dans le cadre du renforcement de son équipe Data, notre client recherche un Data Engineer Senior pour contribuer à la construction et à l'évolution de sa plateforme de données. Vous interviendrez sur l'ensemble de la chaîne de valeur de la donnée : de l'ingestion des flux jusqu'à leur exploitation par les équipes Analytics, BI et IA. Vous serez garant de la qualité, de l'intégrité, de l'exactitude et de la cohérence des données afin de permettre la création d'indicateurs fiables, de tableaux de bord performants et l'alimentation de cas d'usage Data Science et IA. Votre mission consistera également à concevoir une architecture de données robuste ainsi qu'une couche sémantique unifiée facilitant la compréhension et l'exploitation des données par les utilisateurs métiers. Vos missions Data Engineering & Pipelines Concevoir, développer et maintenir des pipelines de données (ETL/ELT). Assurer la collecte, l'intégration et la transformation de données provenant de sources hétérogènes. Optimiser les performances et la fiabilité des flux de données. Garantir la qualité et la cohérence des données tout au long des traitements. Modélisation Data Analytics & IA Concevoir les modèles de données adaptés aux usages analytiques et décisionnels. Mettre en place et optimiser des architectures de type : Data Warehouse /Datamarts/Schémas en étoile Accompagner les besoins liés aux projets IA et à la valorisation des données. Couche sémantique & Business Intelligence Construire et maintenir une couche sémantique assurant des définitions métiers communes et cohérentes. Collaborer avec les équipes métiers pour structurer les indicateurs et KPIs. Participer à la valorisation de la donnée à travers des outils de datavisualisation. Industrialisation & DevOps Participer à l'automatisation des déploiements et à la mise en place des bonnes pratiques CI/CD. Contribuer à l'amélioration continue de l'écosystème Data.

ContexteDans le cadre de l'évolution de sa plateforme Data & IA, un acteur international du secteur de la santé recherche un Consultant Data Platform Engineer afin de renforcer son équipe Data Platform sur un sujet stratégique autour de Databricks et de l'automatisation de l'infrastructure Data. La mission s'intègre au sein d'une équipe Data Platform et Data Engineering responsable de la construction, de l'industrialisation et de la gouvernance de la plateforme de données du groupe. MissionsVous interviendrez principalement sur les sujets suivants : Mise en œuvre et industrialisation de Databricks Unity Catalog Développement et maintien des infrastructures en Terraform Automatisation de traitements et composants sur AWS Contribution à l'évolution de la Data Platform existante Participation à la mise en place des bonnes pratiques d'Infrastructure as Code Collaboration étroite avec les équipes Data Platform et Data Engineering Participation aux choix techniques et à l'amélioration continue de la plateforme Contribution à l'automatisation des déploiements et à la standardisation des environnements