Vous contribuerez : - A l'installation de cluster - Au monitoring et à l'administration des outils Big Data - A l'administration de cluster - A l'upgrade des distributions et des composants Hadoop - A l'installation des différents composants sur Hadoop - Au support et à la résolution des problèmes N2 et N3 - A la mise en place d'environnements de développement et de test - A la sécurisation des clusters Conception et mise en œuvre des architectures de production pour des solutions techniques spécifiques correspondant au besoin du client Implémentation des outils de configuration et d'automatisation pour simplifier les process de déploiement et de mise à jour de la technologie Design et implémentation de la solution dans les systèmes existants Gestion de la capacité des environnements de production et anticipation des évolutions (capacity planning) Alimentation du backlog des Services de production (CI/CD, Continuous Operation, Time2fix,...) en complément des informations collectées auprès des Ingénieurs OPS Mise en oeuvre des bonnes pratiques et intégration continue Installation, configuration et divers paramétrages Pilotage de la mise à niveau de la solution et gestion des impacts
ContexteDans le cadre du renforcement d'une équipe intervenant sur des sujets de Risk Management et de Data, nous recherchons un(e) Business Analyst / Data Analyst pour rejoindre une équipe en charge de la production, de la qualité et de la maintenance des données utilisées dans un environnement de Market Risk. L'équipe intervient notamment sur la maintenance de référentiels fonctionnels, la supervision de la Data Quality, l'analyse et la résolution d'incidents de production ainsi que sur différents projets réglementaires. MissionsMaintenance et production des référentielsVous serez notamment amené(e) à : Analyser les logs quotidiens d'intégration et identifier les éventuelles anomalies ; Assurer le suivi des workflows liés à l'enrichissement des données ; Effectuer la saisie et la modification d'attributs dans les bases référentielles ; Produire et maintenir les reportings de suivi de la production ; Accompagner les évolutions des référentiels : mises à jour massives, création de nouveaux attributs, évolutions du modèle de données, etc. ; Participer aux phases de tests et de validation lors des évolutions applicatives ; Contribuer à l'amélioration et à l'automatisation des processus existants via des scripts Python. Data QualityVous participerez également à la mise en place et à l'amélioration de la supervision de la qualité des données : Analyser les problématiques de Data Quality rencontrées en production ; Identifier les anomalies liées aux données et aux référentiels ; Participer aux réunions de suivi et à la résolution des incidents ; Mettre en place et améliorer des contrôles de cohérence, d'exhaustivité et de détection de données manquantes ou anormales ; Développer en Python des indicateurs de qualité (KQI) ; Collaborer avec les équipes IT afin d'industrialiser les contrôles développés ; Participer à l'amélioration continue des dispositifs de Data Quality. Projets et évolutionsDans le cadre des différents projets, vous pourrez être amené(e) à : Participer à la définition et à l'évolution des modèles de données et des référentiels ; Contribuer aux phases de recette et de tests ; Analyser les besoins fonctionnels et proposer des solutions adaptées ; Accompagner les équipes projet sur les problématiques liées aux données ; Identifier et remonter les anomalies, besoins d'évolution et axes d'amélioration. Reporting réglementaireVous interviendrez ponctuellement sur des exercices de reporting réglementaire et de stress tests : Analyser et comprendre les templates et exigences réglementaires ; Réaliser des contrôles de Data Quality en amont des exercices ; Préparer et mettre à niveau les données et référentiels nécessaires ; Participer aux phases de tests des développements IT ; Produire et consolider les données à reporter ; Participer aux contrôles et réconciliations entre les différentes sources de données ; Répondre aux demandes de données ad hoc ; Contribuer aux phases de post-mortem et aux plans de remédiation. Profil recherchéDe formation supérieure en informatique, ingénierie, finance ou data, vous justifiez d'une expérience significative dans un environnement Data / Risk / Finance de marché. Vous disposez idéalement des compétences suivantes : Business Analysis / Data Analysis ; Bonne maîtrise de SQL et capacité à analyser et requêter des bases de données ; Bonne maîtrise de Python pour le développement et la maintenance de scripts ; Bonne compréhension des modèles et architectures de données ; Expérience dans un environnement de production ; Connaissances en Market Risk : P&L, VaR, Stress Tests, FRTB, Risk Factors, etc. ; Une expérience sur des problématiques de Data Quality est un réel plus ; Une expérience sur AWS / SageMaker serait appréciée. Qualités recherchéesNous recherchons avant tout une personne : Proactive et autonome, capable d'identifier les sujets et de proposer des solutions ; Dotée d'un fort intérêt pour la Data et l'analyse ; À l'aise dans des environnements complexes et à forts enjeux ; Rigoureuse et structurée ; Capable de travailler avec des interlocuteurs fonctionnels et techniques ; Dotée d'un bon esprit d'équipe et d'une bonne capacité d'adaptation.
Dans le cadre d'un projet Data, nous recherchons un Data Analyst confirmé pour intervenir sur des problématiques d'analyse et de valorisation de données dans un environnement technique exigeant. Vos missionsAnalyser et exploiter des données issues de différentes sources. Concevoir et faire évoluer des traitements et workflows sur Dataiku. Réaliser des requêtes et analyses complexes en SQL. Manipuler et exploiter des données sur Teradata. Contrôler la qualité, la cohérence et la fiabilité des données. Produire des analyses et indicateurs permettant d'accompagner les besoins métier. Participer à la documentation et à l'amélioration des processus Data. Profil recherché4 ans d'expérience minimum en tant que Data Analyst. Maîtrise de Dataiku DSS. Très bonne maîtrise de SQL. Expérience significative sur Teradata. Bonne compréhension des problématiques de qualité et d'exploitation des données. Capacité à analyser des données complexes et à travailler avec différents interlocuteurs. Environnement technique : Dataiku, SQL, Teradata, Data Analysis.
Dans le cadre d'un programme stratégique visant à structurer et fiabiliser ses données à l'échelle de plusieurs entités et pays. L'objectif est de mettre en place un socle Data commun, reposant sur des définitions harmonisées, des règles de qualité industrialisées et une gouvernance claire des données. Cette démarche doit permettre de disposer d'une source de données fiable et partagée, facilitant le reporting, l'analyse et la prise de décision des différentes directions métiers. Le périmètre est international et implique de nombreux interlocuteurs issus de fonctions variées : Sales, Operations, Finance, Risk et Compliance. Dans ce contexte, nous recherchons un(e) Business Analyst Data Senior capable de comprendre des problématiques fonctionnelles complexes, de les structurer et de faire le lien entre les équipes métier, Data et IT. MissionsAu sein de l'équipe projet, vous serez notamment en charge de : Analyse et recueil des besoinsRecueillir et analyser les besoins des utilisateurs métiers à travers des entretiens, ateliers et analyses documentaires. Identifier les enjeux, contraintes et objectifs associés aux besoins exprimés. Aller au-delà de la demande initiale afin de comprendre le « Why » et les enjeux métier sous-jacents. Analyser les processus et systèmes existants. Identifier les écarts entre les processus actuels et les processus cibles. Structuration des problématiques fonctionnellesDécomposer des processus et systèmes complexes en éléments fonctionnels facilement exploitables par les équipes de développement. Formaliser les besoins et les règles métier. Identifier les points de blocage, inefficacités et opportunités d'amélioration. Proposer des solutions permettant d'optimiser les processus et la qualité des données. Challenger les besoins et contribuer à la définition des solutions cibles. Spécifications fonctionnellesRédiger les spécifications fonctionnelles détaillées. Formaliser les règles de gestion et les processus métier. Garantir une compréhension commune des besoins entre les équipes métier, Data et développement. Documenter les processus et les fonctionnalités. Maintenir une documentation claire et structurée tout au long du projet. Data Analysis & Data ProductParticiper à la conception et à l'évolution de Data Products. Contribuer à la définition et à la structuration des modèles de données. Analyser les données afin d'identifier les incohérences, anomalies et opportunités d'amélioration. Utiliser SQL pour explorer, contrôler et analyser les données. Participer à la définition des règles de qualité et de contrôle des données. Contribuer à la conception et à l'évolution de dashboards et d'indicateurs. Faire le lien entre les besoins fonctionnels et leur traduction dans les modèles et produits Data. Accompagnement du déploiementDéfinir et accompagner les phases d'activation et de transition vers les solutions déployées. Participer à la définition des plans de formation. Accompagner les utilisateurs dans l'adoption des nouvelles solutions. Assurer un support fonctionnel lors des phases de déploiement. Recueillir les retours utilisateurs et contribuer à l'amélioration continue des solutions. Coordination et animationCollaborer avec les différentes parties prenantes afin de faire avancer les sujets. Animer et participer aux ateliers fonctionnels. Faciliter les échanges entre les équipes métiers, Data et IT. Suivre les actions et contribuer à la résolution des points de blocage. Être capable de driver les équipes et de faire progresser les sujets de manière autonome. Assurer une communication claire et régulière auprès des différentes parties prenantes.
Nous recherchons pour un acteur international, un Senior Data Engineer pour accompagner le développement et l'industrialisation de sa plateforme Data. Au sein d'une équipe Data en pleine structuration, vous interviendrez sur des sujets à forts enjeux autour de la donnée, avec notamment pour responsabilités : • Concevoir et développer des pipelines de données robustes et scalables • Industrialiser et fiabiliser les pipelines existants • Participer à la mise en place d'une architecture Data moderne de type Lakehouse • Prendre en charge les pipelines de bout en bout, de la conception à la mise en production et au monitoring • Mettre en œuvre les bonnes pratiques Data Engineering / DataOps : CI/CD, tests, versioning, monitoring et gestion des incidents • Collaborer avec les Data Engineers, Data Architects, Product Managers et Engineering Managers • Documenter les flux, dépendances, transformations et procédures d'exploitation • Contribuer à l'autonomie et à la montée en compétences de l'équipe Data
Contexte Le projet vise à mettre en place une solution permettant d'ingérer, agréger et exposer des données issues de sources multiples, afin de produire les rapports métiers nécessaires à la surveillance du risque de crédit. La solution est développée sur Google Cloud Platform (GCP) au sein d'une équipe expérimentée, sur un projet à forts enjeux et à forte visibilité. Une expérience dans le domaine du risque de crédit est appréciée. Missions principales Le consultant interviendra notamment sur : La conception et le développement de solutions Data sur Google Cloud Platform ; Le développement et l'intégration de traitements Python / Spark ; La mise en place et l'évolution des pipelines d'ingestion et de traitement de données ; L'ingestion, l'agrégation et l'exposition de données provenant de sources multiples ; Le développement de traitements à forte volumétrie ; La collecte, le stockage et l'exploitation des flux de données ; La supervision et l'intégration de données de différentes natures ; Le contrôle de la qualité et de la sécurité des données ; La maintenance et le suivi du RUN des applications développées ; La maintenance des infrastructures Data associées ; La documentation et la cartographie des différentes sources de données ; La contribution à l'industrialisation des traitements et modèles ; La proposition d'évolutions des infrastructures et solutions Data existantes. La mission rattache également au rôle de Data Engineer la structuration des bases, la gestion des métadonnées et référentiels, l'industrialisation des modèles ML ainsi que leur maintien en RUN.
Dans le cadre d'un projet de transformation Data, nous recherchons un Data Engineer confirmé spécialisé Power BI et Microsoft Fabric pour accompagner le développement d'une démarche Self-Service BI et l'industrialisation des usages Data. Missions principales Accompagner le déploiement des bonnes pratiques et standards Power BI / Microsoft Fabric. Participer à la migration des datasets et workspaces vers Microsoft Fabric / Gen2. Concevoir et optimiser les modèles de données et datasets sémantiques Power BI. Développer des solutions en DAX et Power Query M. Mettre en œuvre la sécurité RLS et contribuer à la gouvernance des environnements Power BI / Fabric. Diagnostiquer et résoudre les problématiques liées aux Copy Jobs, Dataflows Gen2 et capacités Fabric. Analyser les problématiques de performance, de consommation et de saturation des capacités. Utiliser SQL / T-SQL pour les analyses et diagnostics techniques. Accompagner les utilisateurs métiers et participer à des actions de formation et de montée en compétence. Contribuer à la documentation des standards, patterns et bonnes pratiques. Compétences recherchées 6 ans d'expérience minimum en Data / BI. Très bonne maîtrise de Power BI Service. Expérience concrète sur Microsoft Fabric / Gen2. Maîtrise de la modélisation en étoile et des modèles sémantiques. Très bon niveau en DAX et Power Query M. Maîtrise de SQL / T-SQL. Expérience sur la sécurité RLS. Connaissance de la gouvernance Power BI / Fabric. Expérience sur les Dataflows Gen2 et idéalement les Copy Jobs. Capacité à analyser les problématiques de performance et de capacité Fabric. Expérience Snowflake. Expérience de migration Power BI Gen1 vers Fabric / Gen2. Expérience dans la mise en place d'un Centre d'Excellence Power BI (CoE). Expérience en accompagnement ou formation des utilisateurs.
En tant qu'Ingénieur Support & Fiabilité, vous serez responsable de la gestion et de l'assurance de la fiabilité des systèmes et processus de données au sein du département Data Technology. Vous travaillerez en étroite collaboration avec les équipes de développement, les ingénieurs de données et les data scientists pour garantir la disponibilité, la qualité et la performance des pipelines de données et des systèmes sous-jacents. Support et opérations des données Fournir un support de niveau 1 pour les domaines de données, gérer les alertes et incidents pendant le shift de Paris. Objectifs et livrables : Mettre en place les meilleures pratiques de support et la documentation Agir en tant que gatekeeper pour la gestion des versions de données (processus CMRM), gestion de la fiabilité des données Maintenir des pipelines de données fiables et évolutifs (collecte, stockage, traitement, livraison) Mettre en œuvre une surveillance proactive pour la qualité, l'intégrité et la cohérence des données Définir et appliquer les politiques de gestion des données (sauvegarde, récupération, sécurité) Automatisation et meilleures pratiques Automatiser les tâches de données récurrentes pour améliorer l'efficacité et réduire les erreurs Établir une surveillance continue pour détecter les anomalies Promouvoir les meilleures pratiques de développement axées sur la fiabilité des données Collaboration inter fonctionnelle Travailler avec les équipes de développement, quant dev, ingénieurs data et data scientists pour comprendre les besoins Résoudre ensemble les problèmes liés aux données Fournir des conseils techniques sur la gestion des données avec les meilleures pratiques
Contexte de la mission Au sein de la DSI France, le département SI METIER & DATA souhaite renforcer sa capacitée à réaliser des projets Data. Au sein de l'équipe Data et de l'équipe projet, le Data Engineer réalise les intégrations de données, les traitements et les reportings dans PALANTIR Foundry. Il propose et recherche les meilleurs solutions techniques en collaboration avec l'équipe projet et participe au suivi quotidien des flux de données. Le projet concerne en particulier le traitement de données de consommations IT. Objectifs et livrables Comprendre les besoins métier et faire les investigations nécessaires pour une réalisation optimale Concevoir et réaliser les développements et configurations dans Palantir Documenter les réalisation, présenter le résultat et participer aux recettes Intégrer l'équipe BI, travailler en collaboration avec tous les membres et participer à la communité technique. Participer au suivi quotidien des applications Pour cette mission, l'expertise et les compétences attendues sont : · Manipulation et traitement des données : Python · Création de dashboard et fonction d'affichage (JavaScript/TypeScript) · Cloud, Base de données, stockage, automatisation · Framework SPARK · Manipulation d'APIs, etc... · Outil de versionning (GIT) · Comprendre la structure des bases de données mises en place (architecture en étoile, relation 1-N ou N-N..) · Methode Agile / Jira · Connaissance de PALANTIR serait un plus · Anglais : niveau professionnel · Outils bureautique : intermédiaire ou expert (faire un CR, une présentation,…) Compétences demandéesCompétencesNiveau de compétence JIRA / Agile Confirmé Data Engineering Expert AI-assisted development Confirmé Python/pyspark Expert LanguesNiveau de langue Anglais Courant
Notre client, grand groupe international du secteur de l'ingénierie et de l'énergie, recherche un(e) Solution Architect pour rejoindre son domaine digital dédié à la Technologie et aux Produits (T&P). Ce domaine a pour priorité d'apporter des capacités digitales à l'activité Technologie & Innovation (T&I), incluant notamment la digitalisation des activités de laboratoires (Labs). Missions principales Assurer l'alignement entre les besoins métier des équipes Produit et les principes d'architecture d'entreprise Traduire les besoins business en design de solution conforme au cadre d'architecture d'entreprise (documents d'architecture, HLD, LLD) Développer et maintenir l'architecture actuelle et cible des produits du périmètre Proposer des solutions de gestion de la confidentialité et de la souveraineté des données Produire les livrables d'architecture nécessaires à la validation des gates techniques Définir et piloter les KPIs techniques des solutions Accompagner les équipes de delivery agile dans l'implémentation de solutions scalables, sécurisées et pérennes Garantir la conformité aux principes d'architecture du groupe (collaboration avec Design Authority & Enterprise Architecture) Identifier la dette technique et proposer des stratégies de résolution Contribuer à la création de patterns et d'architectures de référence Alimenter le CMDB / portfolio applicatif du domaine Participer à l'estimation budgétaire et à la coordination avec cybersécurité, gouvernance de la donnée et architectes plateforme
Dans le cadre du déploiement d'une plateforme Data sur AWS, nous recherchons un Data Analyst Senior / Analytics Engineer AWS pour intervenir sur des sujets Data Achats, Data Products et Power BI. Vos missions : Vérifier la présence, la qualité et la complétude des données dans AWS Identifier et corriger les écarts ou données manquantes Construire les Data Products dans AWS Traduire les règles métiers en modèles de données Réaliser les contrôles de cohérence entre SAP, AWS et Power BI Contribuer à la reconstruction des reportings Power BI Achats Documenter les règles de gestion, sources et contrôles Collaborer avec le Product Owner, Data Manager, Digital Factory et équipes Achats
VOS MISSIONS • Concevoir et développer les composants d'ingestion, de traitement, de normalisation et de distribution des données. • Construire et améliorer le framework commun, notamment le monitoring, la CI/CD, les tests, la performance, la résilience et la qualité du code. • Recueillir, comprendre, challenger et affiner les besoins métiers. • Concevoir des solutions conformes aux directives d'architecture et aux standards internes du Groupe. • Piloter les activités de développement et contribuer en qualité de profil senior / expert. • Identifier les goulots d'étranglement et les anomalies, puis proposer des solutions d'amélioration continue. • Livrer des services prêts pour la production, avec les outils de supervision et d'alerte associés. • Rédiger et maintenir la documentation technique en anglais, et accompagner les déploiements dans différents pays.
Pilote Qualité et Tests — Pilotage de la qualité et des tests du SI Billettique (Build & Run) Mission de conseil et d'accompagnement opérationnel Test Manager / Lead QA – SI billettique H/FContexte de la missionUn acteur majeur de la mobilité recherche un Test Manager / Lead QA senior afin de sécuriser les évolutions et l'exploitation de son système d'information billettique. Ce SI complexe et interconnecté comprend notamment des parcours digitaux, des équipements physiques, des API, des flux de données ainsi que plusieurs interfaces avec des systèmes partenaires. La mission couvre les activités Build et Run, avec un enjeu important autour des mises en production, de la non-régression et de l'amélioration continue de la qualité. Missions principalesAnalyser le périmètre fonctionnel et technique du SI. Définir la stratégie de test en fonction des risques. Structurer et piloter les plans de tests et les campagnes de recette : Tests fonctionnels et d'intégration. Tests de non-régression. Smoke tests et sanity checks. Organiser la qualification et le suivi des anomalies, risques, dépendances et points bloquants. Planifier et coordonner les activités de test. Animer les rituels QA et suivre l'avancement des campagnes. Coordonner les différents intervenants : métiers, MOA, MOE, équipes Build et Run, Release Manager, exploitation, support, fournisseurs et partenaires. Préparer les éléments d'aide à la décision pour les Go/No Go. Contribuer au suivi des mises en production, des plans de retour arrière et du monitoring post-déploiement. Développer l'industrialisation de la non-régression : Capitalisation des cas de test. Automatisation progressive. Intégration des tests dans les chaînes CI/CD. Mettre en place et maintenir les tableaux de bord et indicateurs qualité. Proposer une trajectoire d'amélioration continue du dispositif de test. Livrables attendusStratégie de test et plans de recette Build/Run. Référentiel des cas de test, campagnes et jeux de données. Smoke tests et sanity checks documentés. Tableaux de bord : couverture, exécution, anomalies, risques et tendances qualité. Bilans de recette et rapports de non-régression. Recommandations en vue des mises en production. Trajectoire d'industrialisation et d'automatisation. Documentation assurant la continuité et la réversibilité de la prestation.
DGTL Performance est une société fondée en 2018 à Toulouse. Nous sommes experts en intermédiation dans les domaines Data et BI Nous déployons et accompagnons nos clients sur des solutions en DATA / Business Intelligence. Nous permettons aux entreprises de valoriser leurs données pour en tirer le meilleur parti et accompagner la définition de leur stratégie Notre volonté est de mener à bien des projets data dans une nouvelle démarche RSE, très orientée social et environnement. La majorité de nos clients sont des grands comptes, mais nous souhaitons diversifier notre clientèle et accompagner les PME. Nos prestations : Intermédiation / ESN en DATA Développement et gestion de projets en DATA / Business Intelligence / Stratégie Data Organisme de formation QUALIOPI Conseil / accompagnement / coaching en Business Intelligence / Stratégie Data Mission : Démarrage : ASAP Contrat : CDI Descriptif de la mission : Développer une stratégie de sourcing clients, prospecter de nouveaux clients Développer une stratégie de sourcing consultants pertinente en fonction des profils recherchés Positionner des profils consultants sur des missions client Assurer le suivi des formations Qualifier des collaborateurs / consultants Piloter le projet et être force de proposition Assurer un suivi proactif tout au long du processus de recrutement, tant auprès des consultants que de nos clients internes. Accompagner et suivre les consultants dans leurs missions. Planifier, organiser et prioriser les taches Mais nous recherchons également des soft skills : Entreprenant(e) Sens du relationnel, à l'aise à l'oral Force de proposition Bienveillance, éthique vis à vis des clients / consultants Amener des croissants le matin
Il aura la charge de gérer une architecture Lakehouse : • Data security : Apache Ranger • Data governance : Apache Atlas • Data processing : Spark, Apache Zeppelin • Data ingestion : nifi • Data analytics : Apache Impala • Data lake : hadoop, Apache KUDO • Dara serving: Hue Gestions des logs via la stack ELK (Elasticsearch-Logstash-Kibana) Provisionner des infrastructures via Terraform Connaissance réseaux (Mise en place et ouverture de flux réseau basé sur le dossier d'architecture réseau) Il documente les procédures d'exploitation et rédige des rapports synthétisés Il assure du bon fonctionnement des services dans le respect des SLA. Il connait et s'appuie sur les process ITIL (Gestion des incidents, des problèmes et des demandes de changement) pour opérer dans des environnements de production. Il a un bon niveau d'anglais pour converser avec les éditeurs dont Cloudera et les fournisseurs Il automatise les déploiements de fichiers de configurations, gestion des certificats et keystores via Ansible. Il utilise les Outils devops de versionning et de packages : Github, Jenkins Sa maitrise des environnements sous Linux lui permet d'analyser les logs dans le cadre du traitement des incidents. Il est force de proposition pour l'amélioration de l'exploitabilité des solutions et de la supervision des services. Il participe aux réunions d'équipe et rend compte des actions Il participe aux projets et aux différents comités.
📍 Localisation : Puteaux 🌍 Environnement international — France, Europe, Afrique, Asie Anglais Indispensable 💼 Projets DATA — BUILD & RUN LE POSTE Dans le cadre de projets DATA à dimension internationale, nous recherchons un(e) Data Project Owner /Manager / Data Lead pour piloter des projets visant notamment à harmoniser les KPI et les référentiels DATA à l'échelle internationale. Vous évoluerez dans un environnement international, en interaction avec des équipes situées notamment en France, Pologne, Suisse, Benelux, Afrique du Sud et Asie.
