Dans le cadre d'un programme stratégique de valorisation de la donnée au sein d'un grand groupe industriel international, nous recherchons un(e) Senior Data Architect pour renforcer l'équipe Data Governance. Le/la consultant(e) interviendra sur des cas d'usage Analytics, IA et Master Data Management, avec un focus particulier sur les données IT (Spécifications, Applications, Projets, ITSM, Infrastructure). Il/elle travaillera en transverse avec des communautés variées : experts métier, architectes techniques, data engineers, data scientists et gestionnaires de la gouvernance data. La mission vise à structurer les plateformes de données avec une vision moyen/long terme, en garantissant la qualité, la réutilisabilité et la consommabilité des assets data par les équipes métier.
Intitulé : Data Engineer Senior IA (H/F) Expérience : +7 ans minimum Mode de travail : Hybride Localisation : Île-de-France Démarrage : ASAP Secteur : Services financiers Environnement : AWS, Spark, Python, SQL, DataOps, Gouvernance Data, CI/CD ContexteDans le cadre de l'accélération de sa stratégie Data, un grand groupe du secteur des services financiers recherche un(e) Data Engineer Senior pour rejoindre sa Direction Data & IA. Vous interviendrez au sein d'une équipe en charge de la conception, de l'industrialisation et de l'exploitation des plateformes de données destinées à soutenir les enjeux métiers, réglementaires et analytiques de l'entreprise. Votre rôle consistera à concevoir des architectures Data robustes, piloter l'industrialisation des pipelines de données et garantir la qualité, la gouvernance et la valorisation des données à grande échelle. Missions principalesPilotage des projets DataGérer un portefeuille de projets Data couvrant l'ensemble du cycle de vie de la donnée : ingestion, transformation, exposition et gouvernance. Accompagner les métiers dans l'identification et la formalisation de leurs besoins Data. Traduire les besoins fonctionnels, techniques et réglementaires en solutions concrètes et industrialisables. Être le référent technique Data auprès des chefs de projet, architectes, développeurs, data analysts, data scientists et parties prenantes métier. Piloter les choix techniques et garantir leur cohérence avec les standards de l'entreprise. Conception et développement des pipelines DataConcevoir, développer et maintenir des pipelines d'ingestion de données : Batch APIs Flux programmés Chargements de fichiers Développer des traitements ETL / ELT alimentant un Data Lake et des plateformes analytiques. Mettre en œuvre les bonnes pratiques de modélisation des données. Garantir la performance, la qualité, la résilience et la maintenabilité des traitements. Assurer l'industrialisation complète des développements réalisés. Challenger les choix techniques et méthodologiques proposés par les autres membres de l'équipe. Architecture Data et IndustrialisationConcevoir des architectures Data modernes, modulaires et évolutives. Définir et appliquer les principes DataOps : Automatisation Versionning CI/CD Reproductibilité Observabilité Favoriser la mutualisation et la réutilisation des composants existants avant tout nouveau développement. Construire et maintenir : Pipelines ETL / ELT Chaînes CI/CD APIs de diffusion de données Mécanismes de monitoring et d'alerting Collaborer avec les équipes Data, Cloud et IA afin d'harmoniser les pratiques et accélérer les déploiements. Gouvernance, qualité et conformité des donnéesDéfinir et promouvoir les standards de développement Data. Garantir la qualité, la traçabilité et la conformité des données. Structurer les pratiques autour de : Git et workflows de développement Tests automatisés Documentation Data Catalog Métadonnées Lignage des données Infrastructure as Code Réaliser des audits techniques des pipelines et jeux de données. Assurer la conformité des solutions avec les exigences réglementaires et les politiques internes de gouvernance. Garantir la reproductibilité attendue lors des contrôles et audits. Leadership technique et accompagnementEncadrer et accompagner les Data Engineers juniors et intermédiaires. Participer à la montée en compétences de l'équipe. Assurer un rôle de mentor et de référent technique. Vulgariser les enjeux Data auprès des utilisateurs métiers. Participer aux revues d'architecture et aux processus de validation technique. Contribuer à la diffusion des bonnes pratiques Data et DataOps. Innovation et veille technologiqueRéaliser une veille active sur les technologies Data, Cloud et IA. Identifier les opportunités d'amélioration des plateformes existantes. Proposer des solutions innovantes répondant aux enjeux métiers. Anticiper les évolutions réglementaires et les enjeux liés à la qualité, la gouvernance et la souveraineté des données.
Contexte Dans le cadre du développement de sa plateforme Data & IA basée sur les services AWS — notamment Amazon SageMaker Unified Studio — notre client recherche un Data Platform Engineer pour accompagner les équipes projets dans l'adoption, l'utilisation et l'industrialisation des services de la plateforme. Le consultant interviendra comme référent technique de la plateforme, garantissant la bonne intégration des cas d'usage Data, Analytics et IA, dans le respect des standards d'architecture, de gouvernance et de sécurité. Il travaillera en étroite collaboration avec les équipes Data Engineering, Data Science, BI, Architecture, Sécurité et les équipes métiers. Missions : Support aux projets Data et IA Accompagner les projets dans leur intégration à la plateforme Data AWS Participer aux phases de cadrage et de conception des solutions Data & IA Conseiller les équipes sur les bonnes pratiques AWS et SageMaker Unified Studio Contribuer à l'identification des architectures adaptées aux besoins métiers Assister les équipes projets dans la résolution des problématiques data Participer à la mise en œuvre de nouveaux cas d'usage analytiques, décisionnels et IA Gestion et évolution de la plateforme Administrer et maintenir les environnements SageMaker Unified Studio Garantir disponibilité, performance et fiabilité des services Faire évoluer l'architecture selon les nouveaux besoins Contribuer à l'introduction de nouveaux services AWS et capacités Data & IA Suivre la consommation des services et proposer des optimisations Gouvernance et partage des données Accompagner la publication et la consommation des actifs de données Participer à la mise en œuvre des règles de gouvernance et de qualité des données Veiller au respect des standards de sécurité et des politiques d'accès Faciliter le partage et la valorisation des données entre entités Support opérationnel et expertise Assurer le support de niveau expert sur les composants de la plateforme Analyser les incidents et proposer des actions correctives Accompagner les utilisateurs dans la prise en main des services Produire et maintenir la documentation technique et les guides de bonnes pratiques Animer des ateliers techniques avec les équipes projets et parties prenantes
La Direction des Systèmes d'Information recrute un Data Engineer pour concevoir, développer et maintenir les architectures Data nécessaires à l'exploitation des données par les analystes métiers et data scientists. Principales missions : - Mener les projets d'intégration (temps réel) et data (big data & insights) - Comprendre, analyser et proposer des solutions techniques répondant aux besoins des divers acteurs de la donnée (spécialistes métier, domain managers, architecte, data analystes et scientists) - Apporter un éclairage technique sur les architectures Cloud, dialoguer avec les fournisseurs de solutions et les consultants techniques - Dans une logique de mise en production, créer et déployer des pipelines de données robustes pour les data scientists et data analysts (collecte, stockage, transformation et exploitation) - Assurer une bonne qualité des données pour les projets Machine Learning (préparation, complétude, épuration, enrichissement) dans le but d'optimiser les performances des modèles - Améliorer les processus internes : localisation et traçabilité de la donnée, standardisation des flux et des scripts de traitement des données, documentation - Collaborer avec les équipes basées aux Pays-Bas pour faciliter le Data-Sharing, échanger sur les best-practices et les moyens d'optimiser les architectures - Contribuer à l'amélioration de la gouvernance sur la protection et la confidentialité des données Conception et mise en œuvre d'une plateforme d'intégration Azure à grande échelle, servant de hub central pour 20+ applications métier et orchestrant ~150 flux d'intégration batch et temps réel répartis sur 7 ODS. Développement de flux d'intégration avec Azure Service Bus, Azure Functions, Event Grid et Azure Data Factory pour synchroniser les données entre les différents systèmes. Développement d'orchestrations distribuées et persistantes avec Azure Durable Functions pour gérer des processus métier asynchrones. Conception et gouvernance des API d'intégration via Azure API Management selon une approche spec-first avec validation des contrats d'échange. Modélisation et optimisation des ODS afin de garantir la cohérence et la disponibilité des données opérationnelles. Optimisation des requêtes SQL et des traitements de données pour améliorer les performances et la fiabilité des flux. Développement de composants mutualisés (librairies Python, modules Bicep et Terraform) afin de standardiser les développements et accélérer l'intégration de nouveaux flux. Mise en place des pipelines CI/CD, automatisation des déploiements et amélioration de l'observabilité via la standardisation des logs et des métriques personnalisées.
Contexte de la mission Nous recherchons un AI Engineer disposant de 5 à 7 ans d'expérience, avec de solides compétences en Python, LangChain et IA agentique, ainsi qu'une expertise du cloud Azure. Il interviendra sur la conception, le développement et l'industrialisation de solutions d'intelligence artificielle. Missions principales Concevoir et développer des applications IA en Python. Développer des agents IA avec LangChain : orchestration, utilisation d'outils et intégration aux systèmes existants. Mettre en place des workflows agentiques adaptés aux besoins métiers. Intégrer et déployer les solutions dans un environnement cloud Azure. Évaluer et améliorer la fiabilité, la performance et la qualité des réponses des agents. Collaborer avec les équipes métiers et techniques, et documenter les solutions développées. Compétences requises Solide maîtrise de Python et des bonnes pratiques de développement logiciel. Expérience concrète de LangChain pour la conception d'applications intégrant des LLM. Maîtrise des concepts d'IA agentique : orchestration d'agents, gestion du contexte et appels d'outils. Expertise du cloud Azure, notamment pour l'intégration et le déploiement de solutions IA. Capacité à traduire un besoin métier en solution technique exploitable en production. Compétences complémentaires appréciées Connaissance de LangGraph et d'Azure OpenAI. Expérience des architectures RAG et des bases de données vectorielles. Pratique du CI/CD, de la conteneurisation et du monitoring d'applications IA. Profil recherché Vous justifiez de 5 à 7 ans d'expérience professionnelle en développement logiciel, Data ou IA, avec une expérience significative sur des projets d'IA générative et agentique. Autonome et rigoureux, vous appréciez le travail en équipe et savez expliquer vos choix techniques.Contexte de la mission Nous recherchons un AI Engineer disposant de 5 à 7 ans d'expérience, avec de solides compétences en Python, LangChain et IA agentique, ainsi qu'une expertise du cloud Azure. Il interviendra sur la conception, le développement et l'industrialisation de solutions d'intelligence artificielle. Missions principales Concevoir et développer des applications IA en Python. Développer des agents IA avec LangChain : orchestration, utilisation d'outils et intégration aux systèmes existants. Mettre en place des workflows agentiques adaptés aux besoins métiers. Intégrer et déployer les solutions dans un environnement cloud Azure. Évaluer et améliorer la fiabilité, la performance et la qualité des réponses des agents. Collaborer avec les équipes métiers et techniques, et documenter les solutions développées. Compétences requises Solide maîtrise de Python et des bonnes pratiques de développement logiciel. Expérience concrète de LangChain pour la conception d'applications intégrant des LLM. Maîtrise des concepts d'IA agentique : orchestration d'agents, gestion du contexte et appels d'outils. Expertise du cloud Azure, notamment pour l'intégration et le déploiement de solutions IA. Capacité à traduire un besoin métier en solution technique exploitable en production. Compétences complémentaires appréciées Connaissance de LangGraph et d'Azure OpenAI. Expérience des architectures RAG et des bases de données vectorielles. Pratique du CI/CD, de la conteneurisation et du monitoring d'applications IA. Profil recherché Vous justifiez de 5 à 7 ans d'expérience professionnelle en développement logiciel, Data ou IA, avec une expérience significative sur des projets d'IA générative et agentique. Autonome et rigoureux, vous appréciez le travail en équipe et savez expliquer vos choix techniques.
Contexte de la missionNous cherchons un candidat capable de s'adapter à l'environnement technique du département Service & Données et aux pratiques de l'équipe qu'il va rejoindre : • Qui saura travailler de manière autonome • Disposant d'un bon sens de l'organisation et de la rigueur • Qui saura synthétiser ses travaux pour communiquer efficacement à ses commanditaires Objectifs et livrablesActivité principale A ce titre, le profil sera amené à assurer les activités suivantes : • Participation à des ateliers avec des experts métiers pour collecter le besoin et comprendre les données • Conception et développement de traitements de données • Réalisation d'études statistiques • Présentation de résultats sous la forme de rapports d'étude ou de tableaux de bord • Diffusion et vulgarisation des résultats d'études Le consultant sera également attendu sur les compétences suivantes : • Lien entre la partie métier et la partie data science • Conception fonctionnelle du besoin métier au sein d'un SI • Préparer et participer aux ateliers avec le métier et ses représentants utilisateurs Activité secondaire o Veille technologique sur les outils utilisés au sein du projet o Partage et formation sur les guides de bonnes conduites
Présentation du posteDans le cadre du développement de notre activité Data, nous recherchons un Data Analyst / Analytics Engineer pour intervenir sur des projets de transformation, de modélisation et de valorisation des données. Vous travaillerez à l'interface entre les équipes métiers, BI et Data Engineering afin de transformer les besoins opérationnels en modèles de données fiables, indicateurs pertinents et tableaux de bord exploitables. Vos missionsRecueillir et analyser les besoins des équipes métiers. Définir les indicateurs et les règles de gestion associées. Extraire, transformer et analyser les données avec SQL. Concevoir et maintenir des modèles de transformation avec dbt. Construire des modèles dimensionnels et des architectures en étoile. Développer et faire évoluer des rapports Power BI. Créer et optimiser des mesures et calculs DAX. Exploiter les données disponibles dans BigQuery. Mettre en place des contrôles de qualité et des tests de non-régression. Participer aux projets de migration et de modernisation des environnements décisionnels. Documenter les modèles, les traitements et les indicateurs. Restituer les analyses et formuler des recommandations auprès des métiers. Stack techniqueData Visualisation : Power BI Langages : SQL, DAX, Python Transformation : dbt Cloud : GCP, BigQuery Orchestration : Cloud Composer, Airflow Bases et outils décisionnels : SQL Server, PostgreSQL, SSIS Modélisation : modèles dimensionnels, modèles en étoile, Data Warehouse Qualité et déploiement : tests dbt, Git, CI/CD Data Science et IA : Vertex AI, RAG, LangChain, API OpenAI Compétences recherchéesTrès bonne maîtrise de SQL. Bonne connaissance de Power BI et DAX. Expérience opérationnelle avec dbt. Maîtrise de la modélisation dimensionnelle. Bonne compréhension d'une chaîne décisionnelle de bout en bout. Connaissance des principes de qualité, de fiabilisation et de gouvernance des données. Capacité à comprendre et formaliser les besoins métiers. Une première expérience sur GCP et BigQuery est appréciée. Une sensibilité aux sujets Data Science et IA générative constitue un plus.
Pour un acteur du secteur de la consommation, nous recherchons un Data Steward pour intervenir au sein d'une équipe Data & AI. Le Data Steward agit en tant qu'expert fonctionnel orienté métier et chef de projet. Il est responsable de la réussite des initiatives data sur l'ensemble du cycle de vie de la donnée. Il assure l'interface entre les équipes métiers et les équipes techniques, notamment les Data Engineers et les experts en Data Visualization. Ses principales responsabilités incluent : Comprendre et cadrer les besoins métiers. Définir et gérer le périmètre des projets data de bout en bout. Garantir l'alignement des solutions data avec les objectifs business. Assurer la gouvernance, la qualité et la cohérence des données. Coordonner les différentes parties prenantes impliquées dans les projets. Suivre les risques, les problèmes et les incohérences éventuelles et piloter leur résolution. Participer à la validation des données à travers des requêtes simples. Maintenir une documentation projet structurée et les différents artefacts associés. Favoriser la collaboration entre les équipes métier, data engineering et analytics. Travailler dans un environnement Agile et contribuer à l'amélioration continue des processus. L'environnement fonctionnel couvre principalement les domaines Digital, Marketing et E-commerce.
Basée à Lille, Lyon, Nantes, Grenoble, Marseille, Paris et Bruxelles, Insitoo Freelances est une société du groupe Insitoo, spécialisée dans le placement et le sourcing des Freelances IT et Métier. Depuis 2007, Insitoo Freelances a su s'imposer comme une référence en matière de freelancing par son expertise dans l'IT et ses valeurs de transparence et de proximité. Actuellement, afin de répondre aux besoins de nos clients, nous recherchons un Data Engineer (H/F) à Lyon, France. Contexte : Les missions attendues par le Data Engineer (H/F) : Rédaction des spécifications fonctionnelles afin de couvrir l'ensemble des exigences métiers et IT (IHM, interfaces, ...) Elaborer des cahiers de tests détaillés permettant de couvrir l'ensemble des fonctionnalités de l'outil et des interfaces; Participer à la recette avec les différents interlocuteurs : métiers et leurs DSI, équipe projet. Contribuer à la mise à jour de la cartographie applicative existante et cible, Rédiger et/ou contribuer aux livrables du projet : spécifications fonctionnelles, users stories, conception de service, dans le respect des priorités données par le référent fonctionnel applicatif du domaine pour respecter les jalons Rédiger les cahiers de tests Contribuer aux qualifications et recettes Contribuer à la mise en production Reporter au référent fonctionnel applicatif du domaine et aux instances opérationnelles (comités, suivi de recette) et alerter si besoin Produire les documents nécessaire à l'exploitation de la solution (procédures et mode opératoires pour le mode run dont conception de service). Expérience significative dans la gestion de flux financiers (virements, prélévements, flux bancaires)
Notre client, acteur majeur de son secteur, est à la recherche de son futur IA Engineer / Data Engineer IA (H/F) pour son site de Blagnac, dans le cadre du développement et de la structuration de sa stratégie Intelligence Artificielle. Les initiatives IA sont encore en phase de construction, offrant à ce poste une forte visibilité et l'opportunité de contribuer activement aux orientations futures. Vos missions Intégré à la DSI et en interaction avec les équipes métiers, vous devrez : Assurer une veille active sur les innovations et usages liés à l'Intelligence Artificielle. Identifier et qualifier les opportunités d'utilisation de l'IA au sein des différents métiers. Accompagner les équipes dans l'expérimentation de nouveaux cas d'usage. Participer à la conception et au déploiement de solutions basées sur l'IA. Contribuer à l'industrialisation des initiatives validées. Participer à la structuration des bonnes pratiques et de la gouvernance IA. Faciliter l'adoption des nouveaux outils et usages auprès des utilisateurs. Compétences techniques attendues Connaissances en Data Engineering et/ou IA Engineering. Notions ou premières expériences sur les technologies IA générative. Traitement et valorisation de la donnée. Culture Cloud et plateformes data modernes. Microsoft Fabric apprécié. Connaissances des environnements Microsoft. Intérêt pour l'automatisation et l'industrialisation des usages data et IA.
Le consultant sera amené à travailler sur des sujets Data en s'appuyant sur la plateforme Dataiku, avec une forte dimension technique et opérationnelle. Compétences requises : - Dataiku : Expert - Data Engineering / Data : Expert - Maîtrise de la plateforme Dataiku DSS - Conception et industrialisation de pipelines de données - Préparation, transformation et exploitation des données - Mise en œuvre de traitements et workflows Dataiku - Bonnes pratiques de développement et d'industrialisation Data Prérequis : Une expérience dans des environnements sensibles / Défense serait un plus.
Notre client, acteur majeur de son secteur, est à la recherche de son futur IA Engineer / Data Engineer IA (H/F) pour son site de Blagnac, dans le cadre du développement et de la structuration de sa stratégie Intelligence Artificielle. Les initiatives IA sont encore en phase de construction, offrant à ce poste une forte visibilité et l'opportunité de contribuer activement aux orientations futures. Vos missions Intégré à la DSI et en interaction avec les équipes métiers, vous devrez : Assurer une veille active sur les innovations et usages liés à l'Intelligence Artificielle. Identifier et qualifier les opportunités d'utilisation de l'IA au sein des différents métiers. Accompagner les équipes dans l'expérimentation de nouveaux cas d'usage. Participer à la conception et au déploiement de solutions basées sur l'IA. Contribuer à l'industrialisation des initiatives validées. Participer à la structuration des bonnes pratiques et de la gouvernance IA. Faciliter l'adoption des nouveaux outils et usages auprès des utilisateurs. Compétences techniques attendues Connaissances en Data Engineering et/ou IA Engineering. Notions ou premières expériences sur les technologies IA générative. Traitement et valorisation de la donnée. Culture Cloud et plateformes data modernes. Microsoft Fabric apprécié. Connaissances des environnements Microsoft. Intérêt pour l'automatisation et l'industrialisation des usages data et IA
En tant qu'Ingénieur Support & Fiabilité, vous serez responsable de la gestion et de l'assurance de la fiabilité des systèmes et processus de données au sein du département Data Technology. Vous travaillerez en étroite collaboration avec les équipes de développement, les ingénieurs de données et les data scientists pour garantir la disponibilité, la qualité et la performance des pipelines de données et des systèmes sous-jacents. Support et opérations des données Fournir un support de niveau 1 pour les domaines de données, gérer les alertes et incidents pendant le shift de Paris. Objectifs et livrables : Mettre en place les meilleures pratiques de support et la documentation Agir en tant que gatekeeper pour la gestion des versions de données (processus CMRM), gestion de la fiabilité des données Maintenir des pipelines de données fiables et évolutifs (collecte, stockage, traitement, livraison) Mettre en œuvre une surveillance proactive pour la qualité, l'intégrité et la cohérence des données Définir et appliquer les politiques de gestion des données (sauvegarde, récupération, sécurité) Automatisation et meilleures pratiques Automatiser les tâches de données récurrentes pour améliorer l'efficacité et réduire les erreurs Établir une surveillance continue pour détecter les anomalies Promouvoir les meilleures pratiques de développement axées sur la fiabilité des données Collaboration inter fonctionnelle Travailler avec les équipes de développement, quant dev, ingénieurs data et data scientists pour comprendre les besoins Résoudre ensemble les problèmes liés aux données Fournir des conseils techniques sur la gestion des données avec les meilleures pratiques
Data Engineer BI_Expérimenté à Annecy chez CATS (BPM002865) Tâches - Affiner les US avec le PO/BA, concevoir puis développer les solutions de collecte et de stockage des données (provenant de multiples sources) afin de le rendre disponibles, fiables et exploitables à des fins opérationnelles / réglementaires / décisionnelle : 1. Collecte et intégration des données bruts depuis diverses sources (bases de données, fichiers, etc.) en exploitant un framework interne 2. Modélisation des données (Conception de modèles de données dimensionnels), Nettoyage et mise en qualité des données et agrégation/calcul pour création/enrichissement de datamarts dans un environnement Teradata vis script sql - Déployer les changements dans les différents environnements - Garantir le bon fonctionnement du produit en production et assurer le suivi / l'assistance / la gestion des incidents y compris mise en place et optimisation du monitoring, des requêtes et des performances - Accompagner l'évolution des pratiques de l'équipe dans une logique d'amélioration continue de la qualité du code - Assurer dans la conduite des travaux BI la mise en œuvre du cadre de Sécurité et gouvernance Data (Mise en place des règles de sécurité et d'accès aux données, respect des normes de gouvernance des données et de conformité réglementaire (RGPD)) Contexte Le Chapitre Data, rattaché à la Direction Data, est présent sur les 6 sites CATS. Ses principales missions sont : - L'accompagnement des différentes squads de l'entreprise dans la conception et la réalisation de leurs cas d'usages data, tout en garantissant l'uniformité et la cohérence d'application du modèle Data dans la fabrication des cas d'usages. - L'animation de la gouvernance, la qualité et la protection de la donnée dans l'entreprise via son Data Office. La présente mission vise à renforcer le Chapitre sur des activités de Data Ingénierie BI ⚠️Point d'attention : pertinence de profil Candidature exclusive de profil répondant aux attendus décrits ci-dessous – rôle de conseil attendu des sociétés consultées pour proposition d un profil qualifié. Attendu Renfort du Chapitre Data d'un profil Data Engineer BI qui sera amené à intervenir au sein pour le compte d'une ou plusieurs squads d'Annecy, dans un environnement Teradata, en lien avec PO/BA de la squad ainsi que l'équipe de Dev., ceci dans un cadre agile sujets : production de données à présenter aux organismes de contrôles (type ACPR, OSMP, Banque de France, etc.), participation aux campagnes de déclaratifs règlementaires, production d'indicateurs de mesure de performance des produits, évolution et maintenance des traitements de supervision, développement de tableaux de bord Microstrategy, documentation ⚠️ Au-delà des aspects techniques, il est attendu que le profil soit appétent et sensible aux enjeux métiers : Comprendre les besoins métiers pour adapter et décliner la solution technique Langage : - SQL (expert requis) - xDI Semarchy (apprécié) Data Visualisation (apprécié) : Microstrategy utilisé Base de données SQL (requis) - Teradata (apprécié) DEVOPS (requis) : GIT, Jenkins, Artifactory Monitoring (apprécié) : ELK Stack (Elasticsearch, Logstash, Kibana), Grafana Scrum (cadre agile entreprise) Bonne communication / Pédagogue Prise de Lead / Force de proposition, Sait challenger les besoins Gouvernance et protection de la donnée : Conformité réglementaire (RGPD) Data lineage et catalogage Exploitation et maitrise GitHub Copilot dans la pratique des activités BI
Dans le cadre du renforcement d'un Chapitre Data au sein d'un grand acteur du secteur bancaire, nous recherchons un.e Data Engineer expérimenté.e pour rejoindre une squad métier et intervenir sur la conception, le développement, l'industrialisation et l'exploitation de solutions Data. Votre rôle Intégré.e à une équipe Agile, vous travaillerez en collaboration avec les PO, BA, développeurs et architectes sur l'ensemble du cycle de vie des solutions Data. Vous serez notamment amené.e à : Participer à la définition et à l'évolution de l'architecture Data ; Analyser et affiner les besoins avec les PO et BA et les traduire en solutions techniques ; Concevoir et développer des pipelines de collecte, ingestion, transformation et stockage ; Développer des traitements Spark en batch et en streaming ; Automatiser l'ingestion et orchestrer les flux de données ; Intervenir dans des environnements Hadoop / Cloudera ; Concevoir et exécuter les tests unitaires et automatisés ; Industrialiser et déployer les développements sur les différents environnements ; Assurer le bon fonctionnement des solutions en production et participer à la gestion des incidents ; Mettre en place et optimiser le monitoring et l'observabilité ; Contribuer à l'amélioration continue de la qualité du code et des pratiques de développement ; Participer aux sujets de gouvernance, qualité, protection et traçabilité des données.
🏭 Secteurs stratégiques : Banque d'investissement 🗓 Démarrage : ASAP PAS DE FULL REMOTE NI SOUS TRAITANCE MERCI 💡 Contexte /Objectifs : 💡Objectif global : Participation à différents projets de migration vers la nouvelle plateforme 💡Description détaillée Le contexte de la mission : Participation à différents projets de migration vers la nouvelle plateforme. Participation aux nouveaux projets BI. Contribution aux développements de workflows en python au sein de l'équipe DataHub Core Platform. 💡Responsabilités principales : · La mission consiste à : Participation au projet DQF (Data Quality Framework) Développement des modules python communs qui seront utiles à tous les projets Participation au projet Data Lineage
