Find your next tech and IT Job or contract Big Data

Au sein de la DSI de notre client, dont la mission est de concevoir et maintenir les applications stratégiques des métiers du Groupe. Dans le cadre de l'évolution du Data Lake CIO Office, nous recherchons un Data Engineer expérimenté afin de participer au développement, à l'évolution et à l'industrialisation des pipelines de données, en collaboration avec les équipes de production applicative et DevOps. Vous évoluerez dans un environnement Big Data moderne, orienté Cloud et Agile, avec des échanges réguliers avec les équipes internationales basées à Porto.

Contexte : Dans le cadre de l'évolution d'une plateforme Data Groupe d'un acteur majeur du secteur des transports, nous recherchons un Architecte Solution / Tech Lead Databricks. Vous interviendrez au sein de l'équipe en charge de la plateforme Data afin d'accompagner plusieurs squads métiers dans la conception, l'industrialisation et la mise en production de leurs cas d'usage Data. Vous jouerez un rôle clé de référent technique, en accompagnant les équipes sur les choix d'architecture, les bonnes pratiques et la gouvernance de la plateforme. Vos missions : Participer au cadrage des projets Data et Big Data. Définir et valider les architectures techniques. Accompagner les Tech Leads et les équipes de développement. Concevoir des solutions basées sur Databricks. Participer aux revues d'architecture et aux arbitrages techniques. Rédiger la documentation d'architecture (DAT, HLD, DEX, dossiers techniques…). Accompagner les mises en production et les passages en exploitation. Participer à l'amélioration continue de la plateforme Data. Promouvoir les bonnes pratiques de développement, de sécurité, de gouvernance et de FinOps. Intervenir ponctuellement en support expert (N3). Former et accompagner les équipes projets. Environnement technique : Cloud : AWS Data Platform : Databricks Big Data : Spark, Scala, Python Data Lake / Lakehouse Power BI CI/CD : GitLab CI Infrastructure as Code : Terraform Conteneurisation : Docker, Kubernetes Sécurité & IAM Agile Scrum

Chaque moment compte. Surtout ceux que vous vivez à fond. Bienvenue chez Consort Group. Consort Group, accompagne depuis plus de 30 ans les entreprises dans la valorisation de leurs données et infrastructures. Elle s'appuie sur deux leaders, Consortis et Consortia, et place l'humain et la responsabilité sociétale au cœur de ses valeurs. C'est votre future équipe Les équipes de ConsortIA, sont des acteurs de référence de la Data, du Développement Digital et de l'Ingénierie Média. En combinant ces expertises, nous concevons des systèmes d'information augmentés, intégrés, agiles et sécurisés, au service de la performance et de la transformation numérique de nos clients. Data Engineer Senior H/F C'est votre mission Vous êtes passionné·e par les environnements Big Data, le Cloud et les architectures distribuées ? Ce poste est fait pour vous. En tant que Data Engineer Senior, vous participez à la modernisation des plateformes Data d'un grand acteur bancaire, en contribuant aux projets de migration et d'industrialisation des traitements Big Data. Côté build : Participer aux études de faisabilité (POC/POV) autour des plateformes Data Cloudera CDP, Flexible Lake House et Google Cloud Platform. Concevoir et développer les solutions de migration des traitements Big Data vers les nouvelles architectures. Préparer les données (nettoyage, transformation, chiffrement et chargement) avant leur migration. Réaliser les développements Spark et SQL nécessaires à l'adaptation des traitements existants. Concevoir et exécuter les tests unitaires, d'intégration et de performance. Documenter les solutions mises en œuvre et contribuer aux estimations de charge des projets. Côté run : Participer au déploiement en production et aux opérations de bascule des applications. Assurer le monitoring des traitements et le diagnostic des incidents via l'analyse des logs et des métriques Spark. Garantir la période de support post-migration et accompagner les équipes métiers lors des phases de validation. Collaborer avec les équipes architecture, plateforme et les différentes squads Data. Contribuer à l'amélioration continue des plateformes et des pratiques d'industrialisation. C'est votre parcours Vous avez au moins 7 ans d'expérience en Data Engineering dans des environnements Big Data et Cloud. Vous appréciez les projets de transformation technique, les architectures distribuées et les environnements collaboratifs où innovation et qualité vont de pair. C'est votre expertise : Spark, SQL et traitements batch distribués Cloudera CDP Parquet, Apache Iceberg Google Cloud Platform (GCS, Dataproc ou GKE) Kubernetes (exécution de jobs Spark) Git, GitLab CI/CD, Docker Kafka et technologies de streaming (notions appréciées) Lecture de logs, monitoring et diagnostic des traitements Méthodologie Agile Jira, Confluence, GitHub Copilot C'est votre manière de faire équipe : Sens du service Esprit d'analyse et de synthèse Excellent relationnel et communication Esprit collaboratif Organisation et adaptabilité Autonomie Curiosité Capacité à travailler avec des équipes techniques et métiers C'est notre engagement Chez Consort Group, vous êtes un·e expert·e qu'on accompagne pour que chaque mission devienne une étape qui compte. Un onboarding attentif et humain Une vraie proximité managériale Des formations accessibles en continu Des engagements concrets : inclusion, égalité, solidarité Un package RH complet : mutuelle, carte TR, CSE, prévoyance Une culture du feedback et des projets qui font sens C'est clair Le process de recrutement : Un premier échange téléphonique avec notre team recrutement Un entretien RH ainsi qu'un échange métier avec un.e ingénieur.e d'affaires Un test ou un échange technique avec un.e de nos expert.es Un dernier point avec votre futur.e manager ou responsable de mission Et si on se reconnaît : on démarre ensemble C'est bon à savoir Lieu : Villejuif Contrat : Freelance Télétravail : [Hybride selon mission] TJM = à partir de 600€ Famille métier : Data Engineering / Big Data / Cloud Ce que vous ferez ici, vous ne le ferez nulle part ailleurs. Ce moment, c'est le vôtre.

DBA PRODUCTION ORACLE POSTGRES ET SQL SERVER Administrer les bases de données en environnement de production 24/7 Les livrables sont : Documents d'exploitation - Compte-rendu d'intervention Compétences techniques : PostgreSQL - Expert - Impératif MS-SQL - Confirmé - Impératif Big Data Cassandra - Confirmé - Un plus Oracle - Confirmé - Important Description détaillée Assurer le maintien en conditions opérationnelles des environnements portant les bases de données, avec périodes d'astreintes et interventions en HNO le cas échéant. Exploitation récurrente et proactive. Administration des environnements (Bases, supervision, sauvegardes, évolution). Optimisation et tuning.Traiter (N2 et N3) les incidents de Production. Réaliser les demandes de services et de changements. Réaliser le support aux équipes Projets et Intégration (participation aux transferts en production, mise à disposition des données aux plate-formes Hors Prod). Valider la documentation technique du domaine.Produire des documents techniques et les fiches de consignes nécessaires au pilotage. Etudier, proposer et prendre en charge la mise en œuvre des évolutions des environnements (migration, upgrade, nouveaux environnements).

CONTEXTE Client final : grand groupe média & audiovisuel français. Au sein de la Direction IT Transverse, l'équipe Services & Automatisation met en place les plateformes de services du groupe. Nous recherchons un Ingénieur Data expérimenté (5 ans et plus) pour construire un MVP de plateforme Data On-Premise reposant sur des briques Open Source : Kafka, NiFi, Spark, Iceberg, Trino. Le MVP s'intègre au socle existant (Kubernetes, GitLab CI, Prometheus/OpenTelemetry) ; projet mené avec l'équipe Data & IA. OBJECTIFS DE LA PLATEFORME - Gérer la transformation de données On-Premise et alimenter un datalake On-Premise - Servir de plateforme d'ingestion pour la plateforme Big Data hébergée sur GCP - Passer les traitements du mode batch au temps réel (streaming) - Démontrer la faisabilité de la migration des flux ETL portés par un outil propriétaire (type OpenText/Genio) : quelques flux dans le MVP, migration complète hors scope MISSIONS 1. Conception et développement du MVP - Architecturer une plateforme On-Premise scalable et robuste, intégrée au socle existant - Choisir, configurer et déployer les briques Open Source : Kafka (streaming), NiFi (ingestion et orchestration de flux), Spark (traitement distribué), Iceberg (tables analytiques), Trino (requêtage SQL distribué) - Intégrer la plateforme avec Kubernetes, GitLab CI (pipelines de déploiement et tests) et Prometheus/OpenTelemetry (monitoring et observabilité) 2. Validation technique et faisabilité - Transformer quelques flux ETL existants pour démontrer la valeur ajoutée - Mettre en place des pipelines streaming (Kafka + Spark Structured Streaming) - Alimenter le datalake On-Premise (Iceberg + Trino) - Valider l'interopérabilité avec la plateforme Big Data GCP 3. Collaboration et transmission - Travailler avec l'équipe Data & IA (besoins métiers/techniques) et les équipes DevOps/Infrastructure (intégration au socle) - Documenter les choix techniques, architectures et bonnes pratiques - Former et accompagner les équipes internes sur les nouveaux outils

Contexte : Au sein des équipes de production Data, l'ingénieur assure le maintien en conditions opérationnelles (MCO) des plateformes décisionnelles et Big Data du groupe : Teradata, Entrepôt de Données & Usages, Cloudera, Datalayer. Il intervient également sur un chantier structurant de migration des traitements batch Big Data de l'ordonnanceur DollarU vers Control-M. Missions : Maintien en conditions opérationnelles des plateformesParticipation aux différentes réunions de suivi (production, exploitation, comités techniques) Intervention sur les incidents de production Pilotage des incidents et des problèmes, et sollicitation des entités compétentes en cas de besoin (Système, Stockage, Réseau, Éditeurs…) Déploiement des nouvelles versions applicatives et des patchs correctifs, en coordination avec la MOA et la MOE Déploiement de nouveaux batchs et flux de transferts, en veillant à la conformité avec l'existant et les nomenclatures en place Mise à jour des documentations d'exploitation (fiches consigne, dossiers d'exploitation, procédures) Coordination des tâches de l'équipe Migration des traitements batch Big Data (DollarU → Control-M)Définition des lots de migration en fonction des contraintes de production Contrôles de cohérence des données utilisées selon les environnements cibles Adaptation des scripts et des variables à l'environnement Control-M Vérification du bon fonctionnement en Pré-Production, puis en Production Participation aux comités de suivi Coordination des tests et du plan de migration avec les MOE Adaptation des consignes d'exploitation à la nomenclature spécifique Control-M Conditions d'exerciceLocalisation : site client / télétravail partiel selon la politique en vigueur Rythme : horaires de production, avec possibles astreintes et interventions en heures non ouvrées (HNO) lors des mises en production Langue : français courant ; anglais technique (lecture de documentation) Livrables attendusRésolution et suivi documenté des incidents et problèmes Mises en production réalisées conformément au processus de changement Documentation d'exploitation à jour (fiches consigne, dossiers d'exploitations Comptes rendus de comités de suivi

Contexte et objectif de la mission Au sein d'une organisation du secteur du transport en commun, la mission consiste à accompagner les squads métiers sur l'ensemble du cycle de vie des projets Data. Le consultant intervient comme référent architecture et Tech Lead auprès des équipes projets afin de garantir la qualité des solutions, l'application des bonnes pratiques Data et l'alignement avec les standards de la plateforme. Missions principales / responsabilités • Assurer l'expertise plateforme auprès des squads projets dès le cadrage et jusqu'à la mise en production • Accompagner les Tech Leads dans leurs choix d'architecture et dans la rédaction des DAT • Réaliser l'onboarding des équipes projets sur les standards et bonnes pratiques de la plateforme • Challenger les architectures proposées et identifier les risques techniques • Superviser les contributions des Data Engineers et des experts Data Management, Dataviz et Data Science • Participer aux Go/NoGo, VSR, audits, PoC et études techniques • Contribuer au support N3 et au MCO des solutions Data en production • Accompagner la montée en compétence des équipes projets sur Databricks et les pratiques Big Data Livrables attendus • DAT • Contributions d'architecture et recommandations techniques • Audits, PoC et études techniques • Participation aux jalons Go/NoGo et VSR • Support N3 et activités de MCO sur les solutions Data

Rejoignez une grande organisation du secteur de la grande distribution en tant que Data Product Owner expérimenté au sein d'une Data Platform moderne. Vous piloterez la conception et le développement de services digitaux centrés sur la donnée, garantissant aux équipes l'accès à des données fiables, accessibles et bien gouvernées via des API et des services analytiques performants. Vous occuperez un rôle clé de traducteur entre les métiers et les équipes IT, en assurant l'alignement stratégique entre les besoins opérationnels et les objectifs décisionnels. Vous concevrez des solutions data complètes, du cadrage initial à la mise en production, en passant par la spécification technique et fonctionnelle. Votre expertise en SQL et votre compréhension approfondie de l'écosystème data seront essentielles pour modéliser les objets métiers dans le socle Big Data, définir les contrats d'interface et les flux d'alimentation, et concevoir les expositions data (APIs, modèles de base de données) en collaboration avec l'équipe de Gouvernance Data. Au quotidien, vous piloterez le backlog produit, définirez les user stories, animerez la communauté data, et assurerez la cohérence fonctionnelle et transverse de votre domaine de données. Vous participerez activement au cycle complet Scrum, de la préparation de recette au suivi de la mise en œuvre, tout en maintenant une vision d'amélioration continue et de qualité des données. Responsabilités : - Concevoir et cadrer les solutions data ; rédiger les spécifications technico-fonctionnelles et les contrats d'interface - Modéliser les objets métiers du domaine dans le socle Big Data et spécifier les flux d'alimentation (MDD, mappings) - Concevoir les expositions data (web services et modèles BDD) en étroite collaboration avec la Gouvernance Data - Piloter le backlog produit, définir les user stories et construire la roadmap stratégique de la plateforme data - Animer la communauté data et assurer le lien fluide entre les métiers et les équipes IT - Préparer les recettes fonctionnelles et suivre la mise en œuvre avec l'équipe Scrum - Piloter la qualité des données via des dashboards de suivi, documenter les données et gérer les dettes techniques - Gérer les évolutions et anomalies remontées par les utilisateurs ; reporter l'avancement aux responsables programme - Assurer la cohérence fonctionnelle et transverse du domaine de données avec les autres lignes produit - Analyser les situations, identifier les axes d'amélioration et proposer des optimisations permanentes Télétravail : 2 jours par semaine Localisation : Massy

Nous recherchons un Product Owner Data senior pour rejoindre la Data Platform d'un grand groupe du secteur de la distribution et du retail. Vous piloterez la conception et le développement des services digitaux centrés sur la donnée, en assurant la fiabilité, l'accessibilité et l'alignement entre les équipes opérationnelles et décisionnelles. Dans ce rôle d'expert data, vous combinez trois dimensions clés : concepteur data, référent fonctionnel et chef de projet Agile. Vous serez responsable de la conception des solutions data end-to-end, de l'analyse et du cadrage des besoins métier, jusqu'à la mise en œuvre et la recette. Vous structurerez l'écosystème data autour de modèles de données robustes (MDD), de contrats d'interface clairs et d'expositions data sécurisées (API, web services, modèles de base de données). Vous animerez les rituels Agile (sprint planning, suivi d'équipe), piloterez le backlog produit et gérerez un portefeuille de projets data complexes en assurant leur cycle de vie complet. Au-delà de l'aspect technique, vous serez garant de la qualité et de la cohérence du domaine de données, en documentant, en qualifiant les données et en donnant du sens aux informations exposées. Vous construirez et alimenterez la roadmap produit data, assurerez une cohérence transverse avec les autres lignes produits et piloterez la qualité des données via des dashboards et le suivi des dettes techniques. Enfin, vous serez l'animateur et le lien privilégié entre les métiers et les équipes IT, capable de traduire les besoins opérationnels en solutions data exploitables et performantes. L'environnement technique repose sur un socle Big Data moderne, une architecture orientée services et une gouvernance data structurée. Vous évolurez dans une méthodologie Agile/Scrum avec des équipes pluridisciplinaires et des cycles d'itération courts. Responsabilités : - Concevoir les solutions data et architectures d'exposition (MDD, API, web services, modèles BDD) en fonction des besoins métier et de la gouvernance data - Rédiger les spécifications technico-fonctionnelles, les contrats d'interface et les spécifications de mapping pour les flux d'alimentation - Analyser, cadrer et qualifier les demandes métier ; proposer des solutions adaptées avec identification des axes d'amélioration - Piloter la modélisation des objets métiers dans le socle Big Data et assurer leur cohérence transverse - Construire et maintenir la roadmap produit data en collaboration avec les stakeholders métier et IT - Animer les rituels Agile (sprint planning, daily standups, retrospectives) et gérer le backlog produit via la définition des user stories - Gérer un portefeuille de projets data, piloter leur cycle de vie et reporter l'avancement aux responsables programme - Assurer la qualité des données, maintenir des dashboards de suivi et piloter la résorption des dettes techniques - Qualifier,...