ContexteDans le cadre du renforcement de son équipe Data & IA, notre client recherche un Data Engineer / Administrateur Plateforme Data pour assurer l'administration, l'exploitation et l'évolution des infrastructures Data basées sur Cloudera CDP et les technologies Open Source. Vous interviendrez sur des plateformes critiques en collaboration avec les équipes applicatives, infrastructures, métiers et internationales afin de garantir la disponibilité, les performances et l'évolution des environnements Data. MissionsAdministration & ExploitationAdministrer et maintenir les plateformes Data Cloudera CDP. Garantir le maintien en condition opérationnelle des infrastructures. Superviser les plateformes et assurer le traitement des incidents. Participer aux astreintes et aux interventions hors horaires ouvrés. Optimiser les performances et la capacité des plateformes. Data EngineeringConcevoir les solutions d'ingestion de données (API). Mettre en œuvre des architectures de stockage (Hadoop, Ozone, Druid, ClickHouse...). Développer et automatiser les traitements de données. Mettre en place les tests unitaires et d'intégration. Industrialiser les traitements de nettoyage et de transformation des données. Évolution des plateformesParticiper aux migrations des clusters Hadoop Cloudera. Contribuer au déploiement des nouvelles plateformes Cloudera Data Services sous OpenShift/Kubernetes. Être force de proposition sur les évolutions techniques. Participer au design des infrastructures Data. Support & ExpertiseRésoudre les incidents complexes (Hive, Spark, Yarn...). Accompagner les équipes applicatives et métiers. Assurer un support technique de haut niveau. Participer à la documentation et au partage de connaissances. Environnement techniqueImpératifCloudera CDP 7.1.x RedHat Enterprise Linux 8 & 9 Python Java Ansible DevOps Très bonnes connaissancesHadoop Hive HBase Kafka Spark Solr Knox Ranger ZooKeeper Kerberos LDAP AppréciéesOpenShift Kubernetes Trino / Starburst Airflow Flink Maven Gradle ClickHouse Ozone Druid Profil recherchéFormation Bac+5 en informatique ou équivalent. Expérience significative sur des plateformes Big Data Cloudera. Expertise Linux RedHat. Bonne maîtrise des environnements Open Source Data. Solides compétences en automatisation (Ansible). Connaissances DevOps. Capacité à analyser et résoudre des incidents complexes. Esprit d'équipe, autonomie et bonnes capacités de communication. ConditionsCouverture de l'équipe : 8h00 – 19h00 Astreintes et interventions hors horaires ouvrés selon un planning de rotation. Niveau attendu : Confirmé / Senior (N4). Compétences clés : Cloudera CDP 7.1.x, RedHat 8/9, Hadoop, Spark, Hive, Kafka, Python, Java, Ansible, DevOps, OpenShift, Kubernetes.
Merci de contacter Sumi Delplanque. Nous recherchons un expert Big Data confirmé pour prendre en charge l'exploitation complète et la sécurisation d'un écosystème Cloudera Data Platform (CDP) en environnement de production, avec une architecture Lakehouse déjà en place. Le cœur du besoin : administration et MCO/MCS de Cloudera Nous avons besoin de quelqu'un qui assure : L'installation et l'administration du cluster avec TLS et Kerberos (donc un environnement sécurisé, pas un POC). MCO/MCS (Maintien en Conditions Opérationnelles/de Sécurité) des services cœur : HDFS, Yarn, Zookeeper, Cloudera Manager. Des morning checks quotidiens avec rédaction de rapports synthétisés : visibilité et traçabilité sur l'état de la plateforme, pas juste un "ça marche". Le périmètre technique : une architecture Lakehouse complète Nous requérons un profil capable de couvrir toute la chaîne de valeur de la donnée : Il assure le déploiement et le MCO/MCS de l'écosystème Cloudera (Cloudera manager, services Cloudera data platform : HDFS, Yarn, Zookeeper …). C'est un poste de généraliste expert plutôt que de spécialiste pointu sur un seul outil : nous voulons une personne qui parle à toute la stack, pas plusieurs experts séparés. Les compétences transverses attendues Automatisation : Ansible pour les configs, certificats, keystores. Réduction des interventions manuelles répétitives. Process de production : incidents, ticketing, ITIL (gestion des incidents, problèmes, changements). Opération dans un cadre structuré, probablement avec des SLA contractuels. Anglais technique : pour échanger directement avec l'éditeur Cloudera (support niveau 3, escalades). DevOps : Github, Jenkins pour le versionning et les packages. Linux avancé : analyse de logs pour le traitement d'incidents. Contribution active : force de proposition sur l'exploitabilité, participation aux comités et réunions d'équipe. Ce que ça signifie en synthèse : Nous avons besoin d'un administrateur systèmes expert Big Data qui combine trois casquettes : opérationnelle (exploitation quotidienne, incidents, SLA), technique transverse (toute la stack Lakehouse Cloudera) et amélioration continue (automatisation, proposition, reporting). C'est un poste clé pour la stabilité et la sécurité d'une plateforme de données critique en production. Lieu de travail : La Défense 2 jours de télétravail par semaine (full présentiel le 1er mois)
Dans le cadre de l'évolution et du maintien en conditions opérationnelles d'une plateforme Big Data stratégique, nous recherchons un Expert Hadoop / Cloudera CDP Senior pour intégrer une équipe en charge de l'administration et de l'optimisation d'un environnement de données critique. Vos missionsAdministrer et maintenir les clusters Hadoop sous Cloudera CDP. Garantir la disponibilité, la performance et la sécurité de la plateforme. Automatiser les déploiements, patchs et opérations d'exploitation via Ansible et Terraform. Participer à la résolution d'incidents complexes et aux task forces techniques. Accompagner les montées de version des composants Hadoop. Déployer de nouvelles fonctionnalités à forte valeur ajoutée. Assurer la gestion des changements (préparation, tests, rollback, suivi). Produire et maintenir la documentation technique. Environnement techniqueHadoop Cloudera CDP 7.1.9 Kafka Apache NiFi Spark Ansible Terraform Terragrunt AWX Shell Scripting Linux Profil recherché Formation Bac+5 école d'ingénieurs ou université. Expérience significative en administration Hadoop en environnement de production. Expertise Cloudera CDP indispensable. Maîtrise d'Ansible et des pratiques d'automatisation. Bonne connaissance de Kafka, NiFi et Spark. Anglais professionnel courant. Autonomie, esprit d'analyse et capacité à intervenir sur des environnements critiques. Les plusMission au sein d'un environnement Big Data de grande envergure. Fort enjeu d'automatisation et de modernisation des infrastructures. Interventions sur des problématiques techniques à forte complexité. Exposition à un écosystème Cloudera/CDP mature et stratégique.
Dans le cadre du développement et de l'évolution de sa plateforme Big Data, un grand compte du secteur bancaire recherche un Administrateur Hadoop Expert afin de renforcer son équipe Infrastructure Big Data. Vous interviendrez sur une plateforme Cloudera CDP stratégique et participerez à son administration, son évolution, son industrialisation ainsi qu'à la résolution de problématiques techniques complexes dans un environnement à forte volumétrie. Vos missionsVous intégrerez l'équipe en charge de l'administration de la plateforme Hadoop et serez responsable de : Administrer, maintenir et faire évoluer les clusters Hadoop sous Cloudera CDP. Installer, configurer et exploiter les composants de la plateforme Big Data. Garantir la disponibilité, la performance et la sécurité des infrastructures Hadoop. Participer aux montées de versions majeures des composants Cloudera. Automatiser les déploiements et opérations d'exploitation via Ansible et Terraform/Terragrunt. Assurer le support technique de niveau 2/3 et résoudre les incidents complexes. Participer aux task forces sur les problématiques critiques de production. Administrer les services Hadoop (HDFS, YARN, Hive, Spark, HBase...). Gérer les plateformes d'ingestion de données (Kafka, NiFi). Mettre en œuvre les évolutions techniques et les nouvelles fonctionnalités de la plateforme. Assurer la documentation technique, les procédures d'exploitation et le transfert de compétences. Collaborer avec les équipes Infrastructure, Data Engineering, Production et l'éditeur Cloudera. Environnement techniqueBig DataCloudera CDP 7.x Hadoop HDFS Hive Spark YARN HBase Oozie IngestionApache Kafka Apache NiFi SécuritéRanger Kerberos Knox DevOps & AutomatisationAnsible Terraform Terragrunt Jenkins Git SystèmesLinux Shell scripting MonitoringGrafana Elasticsearch / Kibana Prometheus (apprécié)
Contexte: Dans le cadre du développement de ses activités autour de la valorisation de la donnée, notre client recherche un Business Analyst Data / AMOA Senior pour accompagner les directions métiers dans leurs usages de la donnée et renforcer l'équipe Conseil & Valorisation Data basée à Niort. Le consultant interviendra en proximité des métiers afin d'identifier leurs besoins, les conseiller sur les opportunités offertes par la Data et contribuer à la réussite des projets décisionnels et Big Data. Missions: Assurer une proximité et accompagner les directions métiers sur les usages autour de la donnée. Réaliser les études et apporter le bon conseil vers les métiers sur le volet Data. Assurer le support et l'assistance métier des usages Data. Contribuer à la production des livrables de niveau fonctionnel. Recueillir et analyser les besoins métiers. Apporter le conseil nécessaire aux directions métiers sur l'exploitation de la donnée. Participer au cadrage des projets Data (études d'impacts, faisabilité). Contribuer aux études d'opportunité et de faisabilité sur le volet Data. Garantir la cohérence fonctionnelle et technique du SI. Réaliser les recettes fonctionnelles, qualifier les anomalies et suivre les corrections. Produire des livrables fonctionnels (modélisations de données, SFG, SFD). Tenir à jour la base documentaire du patrimoine. Garantir la bonne satisfaction métier Data (qualité, engagement, coût, délai). Environnement technique: Écosystème Data SI Décisionnel. Informatica. Plateforme Big Data Cloudera DataHub.
Je cherche pour un de mes client un Expert migration et production Cloudera / Databricks Nombre de poste : 1 Expérience : 7 ans minimum Localisation : Paris Nombre de jours de Télétravail : 2 Démarrage : Asap Durée mission : 1 an minimum Contexte : Le projet Data Lake était initialement porté par la Branche Grand Public et Numérique (BGPN) . Dans le cadre de l'évolution de sa plateforme Data vers Azure (projet Data Cloud) l'équipe Data Cloud et IA Factory (DIAF) arrive à une étape clé de ce projet structurant pour l'ensemble : • Mise en production et ouverture aux utilisateur de la version 1.0 de Data Cloud (Azure Darabricks) • Stabilisation d'ODLG (Cloudera) • Migration progressive d'ODLG vers la nouvelle plateforme Data Cloud • Accompagnement des branches sur la décroissance et l'optimisation des consommations Azure • Rapprochement vers une gouvernance i-TEAM • Intégration dans les processus de supervision et de support i-TEAM • Réflexion sur la mise en œuvre d'un nouveau Catalogue de Services • Accompagnement et soutien de l'équipe dans cette transformation La mission consiste à intégrer l'équipe DIAF sur un rôle transverse pour apporter un support dans les processus de stabilisation et de migration. Ce rôle nécessite donc aussi bien une connaissance technique qu'une compréhension des modèles de données et des processus de migration. La prestation inclue : • Analyse des résultats l'audit Cloudera et accompagnement de l'équipe dans le suivi du plan de remédiation • Renfort des actions liées à AIG • Soutien aux équipes socle Data Cloud et ODLG • Soutien aux équipes Outils & Usages • Analyse et optimisation des ressources sur Cloudera et Data Cloud • Accompagnement des plans de migrations et optimisation 1. Gestion des obsolescences Le prestataire devra s'assurer de la maintenabilité des versions liées au support des éditeurs ou de l'image middleware PaaS/IaaS proposée : Gestion de l'obsolescence des socles et images () 2. Livrables / Résultats attendus • Suivi évaluation et CR des activités liées à l'audit Cloudera • Analyse et plan de mitigation des "requêtes lourdes" Cloudera • Proposition d'optimisations des séquences des job avec plan de mise en œuvre et suivi des actions • Suivi et reporting décroissance et décommissionnement ODLG • Bonnes pratiques de migration on-remise -> cloud 3. Cadre technique de la prestation : environnements techniques, outils et niveaux de maîtrise souhaités. Niveaux de compétences attendus : 0 : pas de connaissance 1 : connaissance de base 2 : pratique quotidienne 3 : expertise avérée. Jira 3 Cloudera 3 Azure 3 Databricks 3 Redhat 3 GitLab 3 Terraform 3 Pyhton 3 Dremio 3 4. Cadre fonctionnel de la prestation La réalisation des prestations requiert les compétences approfondies dans les domaines fonctionnels ci-dessous. Data model 3 Data Management 3 Data Viz 2 Sys admin 3 Data migration 3
🚀 Opportunité – Expert Hadoop / Cloudera CDP / Ansible (H/F)Dans le cadre du renforcement d'une plateforme Big Data stratégique d'un grand groupe bancaire, nous recherchons un Expert Hadoop / Cloudera CDP pour intervenir sur des projets d'évolution, d'industrialisation et de maintien en conditions opérationnelles d'une infrastructure critique. Vos missionsAdministrer, maintenir et optimiser des clusters Hadoop (Cloudera CDP). Assurer la disponibilité, la performance et la sécurité de la plateforme Big Data. Automatiser les déploiements, patchs et configurations avec Ansible et Terraform. Participer aux montées de version des composants Hadoop. Intervenir sur des incidents complexes et contribuer aux task forces techniques. Déployer de nouvelles fonctionnalités d'infrastructure. Collaborer avec l'éditeur et les équipes techniques internes. Produire et maintenir la documentation technique. Environnement techniqueHadoop / Cloudera CDP 7.1.x Apache Kafka Apache NiFi Spark Ansible Terraform / Terragrunt Shell scripting GitHub / AWX Profil recherchéSolide expérience d'administration de plateformes Hadoop / Cloudera. Très bonne maîtrise d'Ansible et de l'automatisation d'infrastructure. Expérience sur Kafka, NiFi et Spark. Bonne connaissance des environnements Linux et des pratiques DevOps. Capacité à intervenir sur des problématiques techniques complexes et à accompagner les évolutions d'une plateforme Big Data. Informations complémentaires📍 Localisation : Île-de-France 🏢 Mission en présentiel 📅 Démarrage : ASAP ⏳ Mission longue durée (12 mois renouvelables) 📩 Si cette opportunité vous intéresse, n'hésitez pas à me contacter en message privé ou à envoyer votre CV.
RésuméLe poste de Data Engineer est axé sur le développement et la maintenance de l'infrastructure Big Data , avec un accent sur l'expertise Hadoop pour assurer la gestion, l'optimisation et la disponibilité de la plateforme Hadoop. Responsabilités :Participer aux task forces pour résoudre des problématiques techniques complexes. Évoluer l'infrastructure et déployer de nouvelles fonctionnalités à forte valeur ajoutée. Gérer les montées de versions majeures des composants Hadoop. Mettre en place et maintenir la documentation technique destinée aux entités internes et utilisateurs. Gérer la collaboration avec l'éditeur Cloudera et les entités internes. Suivre le planning global de production. Must Haves :Expertise en Ansible. Expérience avec Apache NiFi. Compétence en Hadoop (Big Data). Maîtrise de Kafka. Connaissances en Scripting (GitHub, Ansible, AWX, shell, VBA). Compétence en Spark. Nice to Have :Certifications Cloud spécifiques (par exemple, Cloudera Certified Professional). Connaissances en Terraform et Terragrunt. Autres Détails :Catégorie: Environnement technique. Détails: Ingestion avec Kafka et Nifi, moteur : CDP 7.1.9, automatisation avec Ansible. Livrables attendus : installation et maintenance des clusters Hadoop, sécurité et performances de la plateforme. Type de prestation : Data Engineering Level 8.4.
Contexte : Le projet Data Lake était initialement porté par la Branche Grand Public et Numérique (BGPN) de [COMPANY]. Dans le cadre de l'évolution de sa plateforme Data vers Azure (projet Data Cloud) l'équipe Data Cloud et IA Factory (DIAF) arrive à une étape clé de ce projet structurant pour l'ensemble du Groupe [COMPANY] : • Mise en production et ouverture aux utilisateur de la version 1.0 de Data Cloud (Azure Darabricks) • Stabilisation d'ODLG (Cloudera) • Migration progressive d'ODLG vers la nouvelle plateforme Data Cloud • Accompagnement des branches sur la décroissance et l'optimisation des consommations Azure • Rapprochement vers une gouvernance i-TEAM • Intégration dans les processus de supervision et de support i-TEAM • Réflexion sur la mise en œuvre d'un nouveau Catalogue de Services • Accompagnement et soutien de l'équipe dans cette transformation La mission consiste à intégrer l'équipe DIAF sur un rôle transverse pour apporter un support dans les processus de stabilisation et de migration. La prestation inclue : • Analyse des résultats l'audit Cloudera et accompagnement de l'équipe dans le suivi du plan de remédiation • Renfort des actions liées à AIG • Soutien aux équipes socle Data Cloud et ODLG • Soutien aux équipes Outils & Usages • Analyse et optimisation des ressources sur Cloudera et Data Cloud • Accompagnement des plans de migrations et optimisation 1. Gestion des obsolescences Le prestataire devra s'assurer de la maintenabilité des versions liées au support des éditeurs ou de l'image middleware PaaS/IaaS proposée : Gestion de l'obsolescence des socles et images 2. Livrables / Résultats attendus • Suivi évaluation et CR des activités liées à l'audit Cloudera • Analyse et plan de mitigation des "requêtes lourdes" Cloudera • Proposition d'optimisations des séquences des job avec plan de mise en œuvre et suivi des actions • Suivi et reporting décroissance et décommissionnement ODLG • Bonnes pratiques de migration on-remise -> cloud 3. Cadre technique de la prestation : environnements techniques, outils et niveaux de maîtrise souhaités. Niveaux de compétences attendus : ? 0 : pas de connaissance ? 1 : connaissance de base ? 2 : pratique quotidienne ? 3 : expertise avérée. ? Jira 3 ? Cloudera 3 ? Azure 3 ? Databricks 3 ? Redhat 3 ? GitLab 3 ? Terraform 3 ? Pyhton 3 ? Dremio 3 4. Cadre fonctionnel de la prestation La réalisation des prestations requiert les compétences approfondies dans les domaines fonctionnels ci-dessous. ? Data model 3 ? Data Management 3 ? Data Viz 2 ? Sys admin 3 ? Data migration 3
Envie de rejoindre une équipe où la tech et les projets stimulants sont au rendez-vous ? Cette opportunité est faite pour vous ! 🚀 Nous poursuivons notre développement et recherchons actuellement un.e Ingénieur Data Cloudera / CDPpour intervenir chez un de nos clients, dans le secteur du Service Numérique. 💻💼 Contexte : Vous rejoignez une équipe en charge d'une plateforme Data stratégique. Votre rôle sera d'accompagner sa transformation, de renforcer sa fiabilité et de participer activement à son évolution. Voici un aperçu détaillé de vos missions : 🎯 Participer à l'évolution de l'architecture d'une plateforme Data basée sur Cloudera CDP. Accompagner les travaux de migration vers une nouvelle plateforme. Industrialiser les traitements et les flux de données afin de gagner en performance et en fiabilité. Contribuer à l'exploitation quotidienne de la plateforme ainsi qu'à son amélioration continue. Apporter votre expertise technique pour accompagner l'équipe et partager les bonnes pratiques. Participer aux réflexions autour des évolutions techniques de la plateforme.
Contexte de la mission Dans le cadre du renforcement d'une équipe Data au sein d'un grand groupe, nous recherchons un Data Engineer expérimenté pour intervenir sur des projets stratégiques de collecte, transformation et valorisation de la donnée dans un environnement Big Data. Le consultant évoluera au sein d'une equipe agile en collaboration avec les équipes métiers, PO/BA, architectes et développeurs. Vos missions Participer à la définition de l'architecture Data en lien avec les architectes et l'équipe projet. Analyser les besoins métiers avec les PO/BA et proposer des solutions adaptées. Concevoir et développer des pipelines Data et des traitements ETL. Développer des solutions d'ingestion, de stockage et de transformation de données provenant de multiples sources. Automatiser et orchestrer les flux de données batch et streaming. Mettre en place les tests unitaires et automatisés. Déployer les solutions sur les différents environnements. Assurer le support de production, le suivi des incidents et l'amélioration continue des performances. Contribuer à l'amélioration des bonnes pratiques de développement et de qualité de code. Environnement technique Big Data : Hadoop Cloudera Traitement de données : Spark (Batch et Streaming) Langages : SQL, xDI Bases de données SQL : Teradata, Hive, Phoenix Bases NoSQL : HBase, MongoDB DevOps & CI/CD : Git, Jenkins, Artifactory, XL Release Monitoring : ELK Stack (Elasticsearch, Logstash, Kibana), Grafana Méthodologie : Agile / Scrum
Dans le cadre d'une direction Data au sein d'un grand groupe d'assurance, nous recherchons un(e) Lead Transformation Data pour rejoindre une équipe d'expertise Data transverse jouant un rôle central dans l'évolution de l'offre de service Data et la définition des standards, cadres de référence et bonnes pratiques Data du SI. Le consultant participera activement à la définition des évolutions de la plateforme Data pour l'accompagner vers une approche hybride, en lien avec l'évolution vers une logique DataDriven et DataProduct. Il contribuera à la transformation Data du SI en apportant un cadre structurant sur le choix et l'évolution des architectures et solutions Data, les patterns d'usage et la gouvernance des solutions. Il devra garantir la cohérence, la robustesse et la pérennité des solutions Data du groupe en alignement avec les feuilles de route métier et le schéma directeur SI. Concrètement, il portera et animera les réflexions d'évolution de la plateforme, participera à l'évaluation des solutions éditeurs et des choix techniques structurants, formalisera les guidelines et standards Data, concevra des patterns réutilisables, interviendra en support des projets sur le cadrage et les revues d'architecture, et mesurera l'alignement des implémentations avec les standards définis. Il travaillera en interaction forte avec les équipes métiers, les équipes socles Data, Build et DataOps, ainsi que les architectes SI et entreprise.
📍 Contexte Société Générale recherche un Data Engineer / Expert Hadoop pour assurer l'administration, la maintenance et l'évolution de sa plateforme Big Data Cloudera CDP. La mission porte sur la fiabilité, la performance, les montées de version et l'automatisation de l'infrastructure Big Data. 🎯 Missions principales Administrer et maintenir les clusters Hadoop Cloudera CDP. Participer aux montées de version des composants Hadoop. Résoudre les incidents techniques complexes et intervenir en task force. Automatiser les déploiements, le patching et l'exploitation avec Ansible et Terraform/Terragrunt. Garantir la disponibilité, la performance et la sécurité de la plateforme. Gérer les changements (tests, rollback, mise en production). Collaborer avec Cloudera et les équipes internes. Rédiger la documentation technique. 🛠 Stack technique Big Data : Hadoop, Cloudera CDP 7.1.9, Spark Ingestion : Kafka, Apache NiFi Automatisation : Ansible, Terraform, Terragrunt, AWX Versioning / Scripting : Shell, Git, GitHub
ACCROCHE SI POUR TOI, CHAQUE DONNEES A SA PLACE, CETTE ANNONCE TE METTRA SUR LA BONNE VOIE ... CE QUE TU RECHERCHES : Travailler sur des architectures Data performantes et scalables Participer à des projets innovants de valorisation des données Relever des défis autour du Big Data, du Cloud et de l'IA Donner un nouveau souffle à ta carrière Alors nous avons la mission idéale pour toi. Au sein d'un acteur majeur du secteur de l'assurance, tu participeras à la mise en place et à l'optimisation des architectures data pour une exploitation stratégique et innovante : Analyse des besoins métier et data, tu feras Modélisation et structuration des données, tu assureras Solutions d'ingestion et d'exploitation, tu concevras Bonnes pratiques Data, tu instaureras Veille sur les innovations Data, tu réaliseras Les équipes, tu accompagneras Aux instances de pilotage, tu participeras QUI TU ES : Diplômé(e) de la formation qui va bien Expérience de 10 ans minimum dans l'architecture Data Expert(e) des plateformes Data Lake, Data Platform, Data Gouvernance, Data Virtualisation, Cloud Habile avec les outils : Cloudera, Power BI AU-DELÀ DES COMPÉTENCES TECHNIQUES, TU ES / AS : Dynamique : tu n'aimes pas rester les deux pieds dans le même sabot Autonome : un guide du Routard te suffira Esprit de synthèse : tu sais aller à l'essentiel Rigoureux(se) : chaque donnée doit être bien placée Curieux(se) : tu suis les tendances Data et IA Visionnaire : tu anticipes les besoins Data des entreprises Pédagogue : tu sais expliquer la valeur des données Organisé(e) : tu aimes structurer et optimiser Communicant(e) : tu fais le lien entre métier et technique
Date de démarrage : 14/09/2026 Durée : 12 mois renouvelables ContexteDans le cadre du renforcement de sa plateforme Data, notre client recherche un Data Engineer expérimenté afin de concevoir, développer et maintenir des solutions de traitement de données à grande échelle. Intégré à une équipe Agile (Squad), vous interviendrez sur l'ensemble du cycle de vie des produits Data, depuis la conception de l'architecture jusqu'au maintien en conditions opérationnelles des pipelines de données. Vous évoluerez en étroite collaboration avec les Architectes, le Product Owner, les Business Analysts et les équipes de production afin de garantir la disponibilité, la qualité et la performance des données au service des métiers, dans un environnement exigeant, idéalement bancaire.
Je recherche un Ingénieur Big Data / Administrateur Hadoop-Cloudera (CDP) confirmé à senior pour une prestation d'accompagnement dans le cadre de la maintenance et la construction des plateformes Hadoop Cloudera (CDP). Ainsi qu'un accompagnement au développement d'un ensemble des DATA Services et challenge des fonctionnalités à développer et les standards de travail. Vous contribuerez : · A l'installation de cluster · Au monitoring et à l'administration des outils Big Data · A l'administration de cluster · A l'upgrade des distributions et des composants Hadoop · A l'installation des différents composants sur Hadoop · Au support et à la résolution des problèmes N2 et N3 · A la mise en place d'environnements de développement et de test · A la sécurisation des clusters Compétences techniques requises · Installation et configuration des différents distributions sur Hadoop : · Installation et configuration des différents composants : Zookeeper, HDFS, Spark, Hive, Kerberos, Sentry, Anaconda, Hue, Kafka… · Monitoring des clusters avec Ambari, Cloudera manager, … · Administration des clusters : droits d'accès, Policy Ranger, création d'environnements… · CI/CD Ansible, Jenkins,… · Méthodes agiles : Scrum, Safe, Kanban, … Profil recherché Une expérience significative dans le cadre de projets Big Data sur une plateforme distribution Hadoop & CDP. · Anglais opérationnel et bonne aisance en communication · Capacité d'analyse et d'adaptation · Force de proposition, la veille technologique.
