La mission consiste à intervenir en tant qu'expert SAS senior dans un environnement bancaire ou financier, sur des solutions Data critiques présentant de forts enjeux métier et réglementaires. Le consultant sera responsable de la conception, du développement, de la fiabilisation et de la maintenance des solutions Data. Il jouera également un rôle de référent technique auprès des équipes, tout en contribuant au pilotage des projets, à la qualité des livraisons et au respect des exigences réglementaires. Ses principales missions seront : Concevoir, développer et optimiser des solutions Data avec SAS. Participer aux choix techniques et aux décisions d'architecture. Piloter et coordonner les développements techniques. Garantir la qualité des développements, des tests et des mises en production. Assurer la maintenance corrective et évolutive des applications. Accompagner les équipes métier dans les ateliers, les recettes fonctionnelles et le support utilisateur. Veiller au respect des exigences de qualité, de performance et de conformité réglementaire.
Dans le cadre d'un besoin sur le périmètre Middleware, BI & Database / Cloud, Integration & BI, recherche d'un Ingénieur BusinessObjects / IBM Data Replication. Missions principales Le poste pourra notamment couvrir : Administration et maintien en conditions opérationnelles des environnements SAP BusinessObjects. Administration et exploitation des mécanismes IBM Data Replication. Supervision des plateformes et des flux de réplication de données. Analyse et résolution des incidents techniques. Gestion des configurations et évolutions des environnements. Participation aux installations, mises à jour et migrations. Surveillance des performances et de la disponibilité des services. Automatisation des opérations d'exploitation lorsque nécessaire. Support technique et expertise auprès des équipes. Documentation des environnements et procédures techniques. Compétences prioritaires Cœur du besoin : SAP BusinessObjects / Business Objects / BO IBM Data Replication Réplication de données Administration BI Environnements Database / Middleware Production / exploitation Compétences complémentaires intéressantes : SQL Administration de bases de données Linux / Unix Scripting / Shell ETL / intégration de données Troubleshooting Supervision Gestion d'incidents
#StormYourCareer - Rejoins STORM GROUP et construis ta carrière avec nous ! Propulse la gouvernance des donnéesTu rejoindras la direction stratégique d'un acteur majeur de la banque. En tant que Directeur de projet RDAR, tu joueras un rôle central dans la structuration d'un programme à plus de 10 M€, visant à révolutionner la fiabilité et la traçabilité des données de risque. Tu seras le chef d'orchestre entre les exigences réglementaires les plus strictes et les technologies Data les plus innovantes. Ton futur environnementTu évolueras à un niveau stratégique, en lien direct avec des sponsors C-Level (DSI, CRO, CFO). Tu manageras une équipe pluridisciplinaire de plus de 10 personnes (Chefs de projet, BA, Experts techniques) et coordonneras les échanges entre les métiers (Risques, Finance, Conformité) et les équipes IT/Data Engineering. Tes missions clésCadrage Stratégique et Initialisation (Phase Amont) Définition de la vision : Piloter les phases de pré-cadrage, définir le périmètre, les enjeux réglementaires et valider les études de faisabilité. Structuration : Élaborer le Business Case, définir la structure de gouvernance, la roadmap réglementaire et le découpage en workstreams (WBS). Lancement : Rédiger la charte projet, la matrice RACI et animer les ateliers de cadrage avec les parties prenantes. Pilotage de Programme et Gestion Financière Responsabilité Budgétaire : Assurer la gestion financière complète du programme (> 10 M€), incluant le forecast, l'atterrissage et la maîtrise des écarts. Pilotage du Delivery : Coordonner les chantiers métiers et techniques pour garantir la mise en conformité RDAR. Gouvernance : Assurer le reporting d'avancement auprès des instances de direction (CODIR, Comité Risques). Gouvernance de la Donnée et Coordination Technique Fiabilisation : Mettre en place les référentiels de traçabilité (data lineage), de qualité de données et cartographier les éléments critiques (CDE). Interface Data : Collaborer avec les équipes Architecture et Data Engineering sur les pipelines (Big Data, Datalake) pour valider les choix techniques. Ton profilExpertise Réglementaire : Maîtrise approfondie des normes RDAR et BCBS 239 en environnement bancaire. Direction de Programme : Expérience confirmée sur des programmes complexes à fort budget (> 10 M€) avec management d'équipes de 10+ personnes. Culture Data/IT : Solides connaissances des environnements de traitement de la donnée (ETL, Big Data, Hadoop/Spark) et des outils de gouvernance. Langues : Anglais professionnel courant. Nos avantagesRemboursement des titres de transport à hauteur de 75%. Tickets restaurant pris en charge par STORM GROUP à hauteur de 50% (10,5€ / jour). Accès Gymlib / Wellpass (sport et bien-être). Contrat Santé / Prévoyance mis en place auprès de la compagnie Alan. Formation continue : Accès à Udemy Business. Prime de cooptation, prime d'intéressement et de participation. Deux à trois jours de télétravail par semaine. 5 raisons de nous rejoindreParcours sur mesure : Co-construis une trajectoire professionnelle unique, adaptée à tes ambitions. Missions Stratégiques : Interviens sur des projets d'envergure, en parfaite cohérence avec ton expertise. Suivi Dédié : Bénéficie d'un pilotage annuel structuré pour garantir ta progression continue. Excellence Continue : Développe tes compétences au quotidien au sein d'un écosystème exigeant. Performance Durable : Évolue dans un cadre où l'exigence métier respecte ton équilibre de vie. Notre processus de sélectionÉchange introductif avec un chargé de recrutement. Entretien métier avec évaluation technique approfondie. Rencontre finale pour validation du fit et projection sur la mission. Storm Group encourage une culture inclusive et multiculturelle où la diversité des profils nourrit notre intelligence collective. En rejoignant la Storm Team, tu intègres un écosystème engagé qui place le développement de tes talents au cœur de sa stratégie, tout en agissant concrètement pour la solidarité et la réduction de l'empreinte environnementale, aussi bien au sein de nos bureaux que dans les projets d'envergure que nous menons chez nos clients.
Dans le cadre d'un projet stratégique au sein d'un grand acteur bancaire, nous recherchons un Expert IBM DataStage capable d'intervenir sur des environnements Data complexes et critiques. 🎯 Vos missions : Conception, développement et optimisation de traitements ETL DataStage Analyse et amélioration des performances des flux existants Gestion des incidents complexes et expertise de niveau 3 Participation aux choix techniques et aux bonnes pratiques Data Accompagnement des équipes de développement et de production
Nous recherchons un(e) Pilote SI Data expérimenté F/H pour piloter des projets Data. Ce pilote SI sera sous la responsabilité du manager de l'entité « Plateformes et Socles Data. Détails de la prestation : La société devra fournir les prestations suivantes : 1. Responsabilités confiées : - Garantir la conduite ou la coordination de projets transverses, à forts enjeux ou présentant des risques importants, dans le respect des objectifs en terme de Qualité / Coût / Délais. - Garantir la performance des solutions déployées, leur conformité aux orientations de l'entreprise et aux besoins des commanditaires / utilisateurs. - Garantir le déploiement des projets et solutions, l'implémentation des changements et contribue à leur appropriation par les différents acteurs. - Elaborer, piloter et suivre le planning des projets Data confiés. - Contribuer à l'efficacité permanente des outils / méthodes / processus / organisations, à leur adaptation à la stratégie et aux évolutions de l'entreprise. - Contribuer à l'optimisation et à la diffusion de bonnes pratiques dans la conduite de projets. 2. Détails de la prestation : - Animation des équipes projets - Formalisation des plannings des projets Data et pilotage / suivi de leur avancement - Planification dans ITBM - Suivi des consommés et des restes à faire - Coordination des acteurs MOE - Préparation et présentation dans les instances de la gouvernance projets - Reporting et alertes projets - Expérience dans le management de projets - Expérience dans le monde de l'assurance - Expérience dans le domaine de la Data (une première expérience dans un contexte Cloudera est souhaitée) et le pilotage de projet DATA 3. Responsabilités • Cadrage et pilotage des projets confiés • Coordination des équipes • Mise en œuvre et animation de la gouvernance (COPIL, Comité de suivi …) • Pilotage budgétaire et reporting • Gestion des risques (conformité, sécurité)
#StormYourCareer ✨ Rejoins STORM GROUP et construis ta carrière avec nous ! Aligne les enjeux métiers et les solutions SINous recherchons un(e) Data Engineer pour renforcer nos équipes et piloter la valorisation de la donnée au sein d'écosystèmes Big Data complexes. Référent(e) technique de premier plan, ton rôle combinera l'intégration massive de flux de données dans un DataLake Azure, la conception d'architectures distribuées scalables et le support avancé des solutions décisionnelles de nos clients. Ton futur environnementTu évolueras au sein d'une entité de pointe dédiée à l'ingénierie des données et aux infrastructures Cloud. En interface directe avec les utilisateurs métiers et les équipes de delivery, tu travailleras sur des environnements Cloud Azure de grande envergure et des technologies de conteneurisation modernes. C'est un cadre idéal pour exprimer ton expertise en développement (Python, Java, Spark), automatiser des cycles de release via des chaînes CI/CD et révéler la valeur ajoutée de données multi-sources. Tes missions clésIngénierie de Données & Architecture Big Data : Assurer la gestion, la modélisation et l'intégration continue des données au sein du DataLake Azure. Analyser, croiser et corréler des flux de données complexes provenant de sources hétérogènes (SQL, NoSQL, Hadoop). Définir l'architecture et maintenir les composants de traitement distribué et de streaming de données en temps réel. Développement, Déploiement & Industrialisation : Rédiger les spécifications techniques générales et détaillées. Concevoir, développer et optimiser les codes de traitement de données (pipelines ETL/ELT). Construire les packages de livraison, gérer les releases applicatives et documenter l'ensemble des processus associés sous JIRA. Collaborer à l'automatisation des déploiements au sein d'environnements conteneurisés et managés. Qualité, Restitution & Support : Élaborer les plans de tests, formaliser les procès-verbaux (PV) de tests et accompagner les utilisateurs lors des phases d'UAT (User Acceptance Tests). Analyser les restitutions responsives et travailler en synergie avec les outils de Dataviz pour mettre en avant la valeur ajoutée des indicateurs. Assurer le support technique de niveau supérieur, la maintenance corrective de la solution et l'assistance aux utilisateurs. Ton profilFormation : Diplôme d'Ingénieur ou Bac+5 spécialisé en informatique, Big Data ou Data Engineering. Expérience : Tu justifies d'une expérience significative et réussie en ingénierie de données dans des environnements d'entreprise exigeants. Expertise Cloud & Big Data : Parfaite maîtrise de l'écosystème Cloud MS Azure (Azure DataLake) et des environnements Hadoop et Spark pour le traitement de volumes massifs. Développement & Streaming : Solides compétences de programmation en Python et Java, ainsi qu'une maîtrise de Kafka pour la gestion des flux temps réel. Conteneurisation & DevOps : Pratique opérationnelle des outils Docker, Kubernetes, GitHub, Jenkins et de la plateforme Azure DevOps. Indexation & Dataviz : Connaissance de la suite ElasticSearch & Kibana pour la journalisation/recherche, et maîtrise de Microsoft PowerBI pour la restitution. Systèmes & Bases de données : Maîtrise des environnements Linux et des technologies NoSQL. Langues : Anglais professionnel opérationnel. Tes atoutsRigueur de Développement : Capacité à produire un code propre, documenté et optimisé pour des traitements à forte volumétrie. Esprit d'Analyse et d'Innovation : Aptitude à comprendre les problématiques métiers pour structurer les modèles de données les plus performants. Sens du Collectif : Excellente communication pour collaborer efficacement avec les équipes de recette (UAT) et assurer un support de qualité. Nos avantagesRemboursement des titres de transport à hauteur de 75%. Tickets restaurant pris en charge par STORM GROUP à hauteur de 50% (10,5€ / jour). Accès Gymlib / Wellpass (sport et bien-être). Contrat Santé / Prévoyance mis en place auprès de la compagnie Alan. Formation continue : Accès à Udemy Business. Prime de cooptation, prime d'intéressement et de participation. Deux à trois jours de télétravail par semaine. 5 raisons de nous rejoindreParcours sur mesure : Co-construis une trajectoire professionnelle unique, adaptée à tes ambitions. Missions Stratégiques : Interviens sur des projets d'envergure, en parfaite cohérence avec ton expertise. Suivi Dédié : Bénéficie d'un pilotage annuel structuré pour garantir ta progression continue. Excellence Continue : Développe tes compétences au quotidien au sein d'un écosystème exigeant. Performance Durable : Évolue dans un cadre où l'exigence métier respecte ton équilibre de vie. Notre processus de sélectionÉchange introductif avec un chargé de recrutement. Entretien métier avec évaluation technique approfondie. Rencontre finale pour validation du fit et projection sur la mission. Storm Group encourage une culture inclusive et multiculturelle où la diversité des profils nourrit notre intelligence collective. En rejoignant la Storm Team, tu intègres un écosystème engagé qui place le développement de tes talents au cœur de sa stratégie, tout en agissant concrètement pour la solidarité et la réduction de l'empreinte environnementale, aussi bien au sein de nos bureaux que dans les projets d'envergure que nous menons chez nos clients.
Dans le cadre d'un projet de transformation Data à dimension internationale, nous recherchons un Senior Data Engineer GCP / Looker (H/F) pour une mission freelance de 6 mois renouvelable, basée à Paris. Le consultant interviendra sur des problématiques de centralisation, de transformation et de valorisation des données, avec un enjeu majeur autour de la définition, de la modélisation et de la restitution des indicateurs de performance (KPIs) métiers. Nous recherchons un profil disposant d'une double compétence : une solide expertise technique sur GCP, BigQuery et Looker, mais également une excellente capacité à comprendre les enjeux business, à échanger directement avec les équipes métiers et à traduire leurs besoins en modèles de données et indicateurs pertinents. Missions principales Recueillir, analyser et challenger les besoins des équipes métiers concernant les indicateurs de performance (KPIs). Traduire les besoins business en spécifications fonctionnelles et techniques exploitables. Concevoir et modéliser les données dans BigQuery pour répondre aux besoins analytiques. Développer et maintenir les modèles sémantiques dans Looker, notamment avec LookML. Définir et structurer les dimensions, mesures et KPIs afin de garantir leur cohérence et leur fiabilité. Concevoir et optimiser les requêtes SQL et les traitements de données dans BigQuery. Participer à la conception et à l'industrialisation des pipelines de données sur GCP. Développer et optimiser les dashboards et outils de reporting dans Looker. Garantir la qualité, la performance et la disponibilité des données mises à disposition des utilisateurs. Collaborer étroitement avec les équipes Data, Analytics et les interlocuteurs métiers. Être force de proposition sur les choix techniques, l'architecture et les bonnes pratiques de modélisation.
Localisation : La défense (2 jours de télétravail par semaine) Expérience : 5 ans minimum Environnement : Microsoft Azure, Data et Production Dans le cadre de l'évolution et de la fiabilisation de ses plateformes Data, notre client recherche un Ingénieur Cloud DataOps Azure pour renforcer ses équipes techniques. Vous interviendrez sur l'exploitation quotidienne des plateformes Data, la gestion des incidents, l'industrialisation des opérations et la sécurisation des mises en production. Vous contribuerez également à la modernisation des environnements Data vers les solutions Microsoft Azure. Vos missions 1. Exploitation et maintien en conditions opérationnelles Assurer la disponibilité, la fiabilité et la performance des plateformes Data. Superviser les pipelines de données, les traitements batch et les flux inter-applicatifs. Prendre en charge les incidents de niveau N2/N3, analyser leurs causes et mettre en œuvre les actions correctives. Assurer le suivi de la capacité, de la performance et de la continuité de service. 2. Administration des plateformes Data Azure Administrer et superviser Azure Data Factory et les flux d'intégration de données. Exploiter les environnements SQL Server et les traitements SSIS. Participer à l'évolution des plateformes Azure Synapse Analytics et Microsoft Fabric. Intervenir sur les services Azure associés : stockage, gestion des secrets, identités et supervision. 3. Industrialisation et automatisation Automatiser les opérations récurrentes à l'aide de PowerShell. Maintenir et faire évoluer les pipelines CI/CD avec Azure DevOps, Git et YAML. Contribuer à l'industrialisation des déploiements et à l'automatisation de l'infrastructure. Participer à l'amélioration continue des pratiques d'exploitation. 4. Mises en production et documentation Préparer et sécuriser les mises en production sur les différents environnements. Élaborer les plans de déploiement, les tests de validation et les procédures de retour arrière. Gérer les accès techniques, les comptes de service, les secrets et les certificats. Maintenir la documentation technique et les procédures d'exploitation à jour.
Intégration et exploitation • Intégrer des applications, principalement dans des environnements Linux. • Concevoir, développer et tester l'industrialisation des procédures d'exploitation. • Consolider et fournir les consignes d'exploitation et de reprise. • Optimiser les procédures d'exploitation existantes. • Accompagner et suivre les premières exploitations. • Assurer les activités de maintenance et de gestion des incidents sur les environnements Windows et Linux. Automatisation et traitements Batch • Développer et exécuter des chaînes applicatives techniques d'infrastructure avec l'ordonnanceur Control-M. • Développer les scripts nécessaires à l'exécution des traitements Batch. • Automatiser les chaînes d'exploitation. • Développer et maintenir les normes de développement liées à l'exploitation. Déploiement et intégration • Concevoir et rédiger les plans d'intégration. • Réaliser les déploiements sur les environnements de tests. Fiche de poste - Intégrateur de données DataHub confirmé H/F Page 2 • Participer à l'implémentation des procédures de sécurité applicatives sur les plateformes Unix et Windows. • Garantir le respect des normes, standards et modes opératoires définis par l'entité. Homologation et qualité de service • Vérifier, pendant la phase d'homologation, que la couverture des tests répond aux exigences de qualité attendues, notamment en matière de performance, de charge et de continuité de service. • Veiller à ce que la fourniture et le support du service respectent les standards de l'entité. • Participer à la mise en œuvre et au suivi des améliorations du service. Environnement technique • Linux • Windows • Unix • Control-M • Scripting et traitements Batch • Environnements Big Data • z/OS, apprécié
Nous recherchons pour une mission longue chez notre client secteur banque/finance en région parisienne un Data Engineer expert. Vous rejoignez une plateforme de données dédiée aux activités de marché, au cœur de use cases d'intelligence artificielle. Vous travaillez au quotidien avec des équipes Data Science et ML sur des sujets à fort enjeu. Vos missions : - Concevoir, développer et maintenir des pipelines de données scalables qui alimentent des use cases d'IA. - Architecturer des flux batch et streaming fiables, traçables et conformes. - Accompagner les équipes Data Science/ML dans la mise en production des modèles (MLOps). - Optimiser les performances des bases et entrepôts de données (SQL, NoSQL, Data Lake). - Mettre en place l'observabilité : monitoring, alerting, logging et métriques. - Veiller à la sécurité des flux et à la gouvernance de la donnée (catalogue, lineage). Vous êtes recruté en CDI cadre chez Ingéniance et vous rejoignez une communauté d'experts de la data et de la finance de marché. Ref : O-LWDVQ
🚀 Opportunité – Développeur Data – SQL / DBT / Python / Power BI 748 Je recherche un Développeur Data confirmé pour intervenir sur un projet stratégique autour de la surveillance du risque de crédit. 🎯 Missions : Participer au développement d'une solution permettant d'ingérer, agréger et exposer des données issues de sources multiples Concevoir et implémenter les solutions techniques Participer à la rédaction technique des User Stories Développer et optimiser les traitements Data Préparer, automatiser et réaliser les tests, notamment les tests d'intégration Participer au support et à la maintenance de la solution Garantir la qualité, la performance et la sécurité des développements 🛠️ Compétences recherchées : SQL – excellent niveau ETL DBT Python Power BI SingleStore apprécié ➕ Une expérience dans le domaine du Risque de Crédit serait fortement appréciée. 👤 Profil : 3 à 6 ans d'expérience Solide background Data / développement Autonomie, communication et esprit d'équipe 📍 Paris 13e 📅 Démarrage : ASAP
Dans le cadre du développement de nouveaux projets d'innovation, nous recherchons un(e) Project Manager / Product Manager DATA & IA. Rattaché(e) aux équipes de direction, vous aurez pour mission de cadrer, piloter et valider des POCs (Proof of Concept) d'Intelligence Artificielle, d'identifier des cas d'usage à forte valeur ajoutée et d'élaborer des dossiers de préconisation technique et stratégique pour l'obtention de financements et l'industrialisation. Missions : Cadrage, Audit & Stratégie : Analyser l'existant (architecture, flux de données, outils, maturité IA) et réaliser l'audit des systèmes concernés. Recueillir et analyser les besoins auprès des différentes directions métiers et animer des ateliers avec les équipes DATA, IT et métiers. Identifier et prioriser les cas d'usage IA à fort impact et forte valeur ajoutée. Cadrer le périmètre des POCs (définition des objectifs, hypothèses, livrables et KPIs). Pilotage Technique & POC : Évaluer la faisabilité technique (choix des algorithmes, pertinence des modèles, qualité de la donnée). Définir l'architecture cible pour l'intégration de l'IA dans l'écosystème. Piloter le développement opérationnel du POC en méthodologie Agile / Lean. Tester, mesurer et analyser la performance des modèles (validation des KPIs, calcul du ROI potentiel). Recommandations, Financement & Industrialisation : Documenter les résultats, formaliser les retours d'expérience et élaborer des préconisations stratégiques et techniques. Construire un dossier argumenté et structuré pour la demande de financement des phases ultérieures. Présenter les conclusions et arbitrages auprès des instances décisionnelles. Élaborer la feuille de route (roadmap) en vue de la phase d'industrialisation en cas de validation.
Qui sommes-nous ?Anafi Consulting est un cabinet de conseil spécialisé dans les transformations technologiques et organisationnelles. Nous accompagnons nos clients grands comptes dans leurs projets stratégiques autour de la Finance, de la Data, du Cloud, du DevOps et du développement applicatif, en combinant expertise technique, compréhension métier et qualité du delivery. Votre rôleDans le cadre de projets stratégiques de transformation Data au sein d'un environnement bancaire international, nous recherchons un(e) Data Engineer Senior / Lead spécialisé(e) dans les technologies Apache Spark, Scala et Azure Databricks. Vous interviendrez sur la conception, le développement et l'optimisation de plateformes de traitement de données à grande échelle, notamment autour des données de marché et des reportings financiers réglementaires. Votre rôle couvrira l'ensemble du cycle de vie des traitements Data : ingestion, transformation, contrôle qualité, optimisation des performances, industrialisation et mise en production. Vous contribuerez également aux choix d'architecture et à l'accompagnement technique des équipes. Vos missions principales Data Engineering & Traitement de donnéesConcevoir et développer des pipelines de traitement de données avec Apache Spark et Scala. Collecter, transformer et consolider des données issues de sources multiples. Développer des traitements distribués pour des volumes importants de données financières. Mettre en œuvre des contrôles de qualité et de cohérence des données. Automatiser les traitements de rapprochement et les calculs financiers. Garantir la fiabilité et la traçabilité des données produites. Architecture Data Lake & AzureParticiper à la conception et à l'évolution d'architectures Data Lake sur Microsoft Azure. Mettre en œuvre des solutions Delta Lake selon une architecture médaillon Bronze / Silver / Gold. Développer et maintenir des traitements sur Azure Databricks. Contribuer à l'optimisation du stockage et de l'exploitation des données sur Azure Data Lake Storage Gen2. Participer aux projets de modernisation et de migration des plateformes Data. Performance & Optimisation SparkOptimiser les performances des traitements Spark. Analyser les plans d'exécution et améliorer les stratégies de partitionnement. Réduire les temps de traitement grâce à l'optimisation des opérations de shuffle et des agrégations. Participer aux migrations et montées de version des environnements Spark. Identifier les axes d'amélioration de la performance, de la stabilité et de la maintenabilité des pipelines. Données financières & Reporting réglementaireDévelopper des traitements de calcul et d'agrégation de données financières. Contribuer à la production de reportings réglementaires tels que NSFR et COREP. Participer à la fiabilisation des données de marché et des référentiels financiers. Développer des mécanismes de rapprochement entre différentes sources de données. Garantir la qualité et la non-régression des calculs. Industrialisation & DevOpsIndustrialiser les traitements Data à travers des pipelines CI/CD. Automatiser les tests unitaires et d'intégration. Participer au déploiement des applications sur Kubernetes / AKS. Utiliser Helm pour la gestion des déploiements. Contribuer à l'amélioration continue des pratiques de développement et de livraison. Expertise technique & AccompagnementParticiper aux choix d'architecture et aux orientations techniques. Accompagner les ingénieurs Data dans leur montée en compétence. Réaliser des revues de code et promouvoir les bonnes pratiques de développement. Collaborer avec les équipes métiers, Data Analysts et équipes IT. Animer des ateliers techniques dans le cadre des évolutions et migrations technologiques. Environnement techniqueData Engineering & Big Data Scala Apache Spark Azure Databricks Delta Lake SQL Cloud & Stockage Microsoft Azure Azure Data Lake Storage Gen2 (ADLS) Architecture Data Lake Architecture médaillon Bronze / Silver / Gold Bases de données & Restitution ClickHouse OpenSee DevOps & Industrialisation Jenkins GitHub Kubernetes / Azure AKS Helm Oozie CI/CD Développement Java Spring Boot Angular Qualité & Performance Tests unitaires et d'intégration Optimisation Spark Partitionnement et shuffle Monitoring des traitements Qualité et fiabilité des données
Objectifs et livrables : • Modèles data & datamarts Snowflake (tables / vues / conventions) + projet dbt (modèles, tests, documentation). • Pipelines industrialisés (orchestration, CI/CD, contrôles qualité, runbooks). Contexte de la mission : Nous recherchons un Tech Lead Data (Snowflake/dbt) pour piloter la delivery technique de produits data: développement, définition des standards, revue de code, CI/CD, qualité, performance et gouvernance (incl. RLS). Vous serez responsable de la chaîne Snowflake → dbt → modèle sémantique, de l'industrialisation et du run (incidents/post‑mortems), tout en mentorant l'équipe. · Expertise Snowflake/dbt · Aide au cadrage technique sur les initiatives et projets du périmètres. Objectifs et livrables : · Modèles data & datamarts Snowflake (tables / vues / conventions) + projet dbt (modèles, tests, documentation). · Pipelines industrialisés (orchestration, CI/CD, contrôles qualité, runbooks). Compétences demandées · Dbt : Confirmé · Communication : Confirmé · Data Modeling : Expert · SNOWFLAKE : Expert Compétences demandées • Dbt : Confirmé • Communication : Confirmé • Data Modeling : Expert • SNOWFLAKE : Expert
Dans le cadre de la modernisation de son Système d'Information, la DSI recherche un Data Engineer Azure afin de concevoir, développer et faire évoluer les plateformes d'intégration et de traitement des données. Vous interviendrez sur plusieurs programmes stratégiques autour des architectures Event-Driven, de la modernisation des flux d'intégration, de la plateforme Data Azure ainsi que des projets analytiques. L'objectif est de construire des solutions robustes, évolutives et maintenables répondant aux enjeux de temps réel, de qualité des données et de performance. Équipe : 2 PO et 7 Data engineers DÉVELOPPEMENT DE LA PLATEFORME MIDDLEWARE AZURE Vous participerez à la conception et au développement d'une plateforme d'intégration temps réel basée sur une architecture Event-Driven. À ce titre, vous serez amené à : - Concevoir des architectures d'intégration basées sur Azure Service Bus et Azure Event Grid. - Développer des Azure Function Apps permettant le traitement, la transformation et le routage des événements. - Concevoir et développer des APIs et composants d'intégration robustes. - Participer aux choix d'architecture technique et aux bonnes pratiques de développement. - Garantir la scalabilité, la résilience et les performances des traitements. - Mettre en œuvre les mécanismes de gestion d'erreurs (Retry, Dead Letter Queue, Idempotence). - Assurer la sécurisation des échanges via Azure Key Vault. Vous interviendrez notamment sur : - Synchronisation des commandes d'achat entre Trax et NetSuite - Intégration des données de vols au format AIDX. - Automatisation des flux d'heures et cycles APU. - Développement de nouveaux flux événementiels entre les applications du SI. QUALITÉ DE DÉVELOPPEMENT Une attention particulière sera portée à la qualité du code produit. Le consultant devra appliquer les bonnes pratiques de développement Python : - Développement d'un code lisible, maintenable et documenté. - Respect des principes Clean Code et SOLID. - Séparation des responsabilités et modularisation. - Gestion robuste des exceptions. - Optimisation des performances. - Revue de code (Code Review). - Développement de tests unitaires avec Pytest. - Respect des conventions de développement (PEP8). - Documentation technique des composants. INDUSTRIALISATION & DEVOPS Vous participerez à l'industrialisation des développements : - Mise en place des pipelines CI/CD sous Azure DevOps. - Déploiement des ressources Azure via Bicep. - Infrastructure as Code. - Gestion des versions avec Git. - Supervision et monitoring des traitements. - Documentation des architectures et des flux. - Amélioration continue des processus de développement.
Bonjour, je recherche pour l'un de mes clients un(e) devOps / data engineer DATABRICKS. Skills : Databricks - AWS - Java Mission : -gérer l'infrastructure Cloud (AWS) -automatiser les déploiements -concevoir, développer, déployer et maintenir des pipelines de traitement de données sur la plateforme Databricks -développer et optimiser des traitements distribués avec Apache Spark afin de garantir la performance et la fiabilité des flux de données -développer et maintenir des API et des services avec Spring Boot N'hésitez pas à revenir vers moi pour des informations complémentaires.