Trouvez votre prochaine offre d’emploi ou de mission freelance Cloudera

Data Engineer avec compétence sur la stack technique Hadoop, Python, Spark/PySpark, Cloudera Expérimenté 3 à 5 années d'expérience sur des activités similaires ... ... .. ... ... .. .. ... ... ... ... ... ... ... .. ... ... ... ... .. ... ... .. ..... ... ... ... ... .. ... ... .. .. ... ... ... ... ... ... ... .. ... ... ... ... .. ... ... .. ..... ... ... ... ... .. ... ... .. .. ... ... ... ... ... ... ... .. ... ... ... ... .. ... ... .. ..... ... ... ... ... .. ... ... .. .. ... ... ... ... ... ... ... .. ... ... ... .

Contexte Vous intervenez au sein du Chapitre Data de notre client, basé à Vannes , dans un environnement Big Data Cloudera . Le Chapitre agit en transverse et contribue à la fabrication des cas d’usage Data pour plusieurs Squads métiers. Vous serez amené à : Collaborer avec différentes équipes métiers Travailler avec des interlocuteurs changeants Échanger avec les membres du Chapitre local et national Responsabilités Participer à la définition de l’architecture Data (en lien avec les architectes et la Squad) Concevoir, affiner et développer des solutions de collecte & stockage de données multi-sources Mettre en œuvre des tests unitaires & automatisés Déployer les produits dans différents environnements Superviser la production , gérer les incidents et le support Contribuer à l’amélioration continue des pratiques et de la qualité de code

Smarteo recherche pour l'un de ses clients, Un Intégrateur Technique ( solution NIFI version communautaire et version éditeur Cloudera) sur Nantes Description: Les modèles d'applications évoluent constamment et tendent à générer et manipuler de plus en plus de données qui peuvent être très sensibles ou critiques pour l'entreprise. Ces données sont également de plus en plus convoitées par les hackers et il devient indispensable d'en assurer un haut niveau sécurité. La prestation consiste a effectuer les Installations/Intégration en s'assurant du haut niveau de sécurité. Les tâches à effectuer : - Mise à jour des packages d?installation de la solution NIFI (version communautaire et version éditeur Cloudera). - Automatisation de la mise à jour des socles existants et report les propriétés de configuration et bases de sécurité, certificats, ? - Installation déployées notamment sur PaaS Openshift (en POD). Les versions actuelles permettent maintenant d?être containerisée ; elles étaient jusqu?à présent installés sur VM. - Installation à automatiser à l?aide de jobs Jenkins et/ou Gitlab CI. - Mise à jour des différentes documentations liées Si vous etes disponible et intéressé, merci de me faire parvenir votre TJM ainsi que votre CV à jours en format word.

Profils 'Couches basses': Genious Systèmes recherche pour son client un(e) Expert Cloudera La mission nécessite des Connaissances en Déploiement et Maintenance Cisco ( Modeles M4 à M7) Bares Metal ESX VMWare ( limité a Testbed et quelques machines isolées) OS Redhat Redhat : Solution Annuaire propre à Jupiter qui n'utilise pas l'annuaire du client ( Synchro GDA vers IDM Redhat IDM) Gestion Nexus Maitrise couche Réseau et process ouverture de flux Sauvergarde (Edges uniquement) via Bareos Expérience et culture de l'automatisation pour les Déploiements Hard, OS et patching Regulies ( 3 patching Secu par an) Gestion de certificats Cultrure de la documentation Connaissances Hadoop ou cluster Data appréciées

Migration des environnements : Cloudera vers Teradata. Dans le cadre d’un projet stratégique de migration des environnements Big Data , notre client cherche à migrer l’ensemble des traitements et des programmes de la plateforme Cloudera vers un environnement Teradata . Cette migration vise à optimiser les performances, la maintenabilité des traitements et à homogénéiser les technologies au sein de l’organisation. Conception et évolution de modèles de données dans des contextes décisionnels Conception et développement de solutions d'alimentation des entrepôts de données et gestion des traitements en production Capacité à rédiger des spécifications techniques et fonctionnelles Technologies : Teradata (Bteq) : Solide maitrise SQL : Maitrise avancée Localisation : Indre-et-Loire (44610) Remote : Présence sur site de deux jours toutes les deux semaines ) Français requis

Contexte de la mission : Dans le cadre de l'évolution de notre écosystème décisionnel, nous lançons un projet de migration des environnements de Cloudera vers Teradata . Ce projet stratégique vise à assurer la continuité et l’optimisation des traitements de données critiques. Objectif de la mission : Assurer la migration des programmes existants sur Cloudera vers Teradata, ainsi que l’ adaptation des traitements en lien avec les nouveaux environnements cibles. Compétences techniques attendues : Maîtrise avancée de Teradata , en particulier BTEQ SQL avancé (optimisation, requêtes complexes) Conception et évolution de modèles de données décisionnels Développement de solutions d’alimentation d'entrepôts de données Gestion des traitements batch en production Rédaction de spécifications techniques et fonctionnelles

Hanson Regan recherche actuellement un consultant TeraData pour une mission freelance de longue durée basée à Tours. Dans le cadre d'une migration vers TeraData depuis Cloudera, vous jouerez un rôle crucial dans la compréhension des exigences techniques actuelles et la mise en œuvre efficace et robuste du nouveau système. Le consultant Teradata retenu devra justifier d'une expérience avérée avec Teradata en environnement professionnel et, idéalement, d'une bonne connaissance de Cloudera. Vous maîtrisez les projets de migration et possédez une bonne expérience des systèmes Linux. Une maîtrise de Python et de Spark serait fortement souhaitée. En raison des exigences de nos clients, nous ne pouvons envoyer que des freelances travaillant via leur propre entreprise française. Malheureusement, nous ne pouvons pas accepter les solutions Portage pour cette mission. Si cette offre vous intéresse, n'hésitez pas à nous contacter dès que possible avec un CV à jour aux coordonnées ci-dessous pour plus d'informations.

Notre client, acteur majeur du secteur banque et assurance, recherche son futur Architecte Data en freelance. Au cœur de notre organisation, l’équipe Data agit en tant qu’expert transverse. Sa mission ? Accompagner les différentes équipes métier dans la construction et la mise en œuvre de cas d’usage Data variés. En rejoignant cette équipe, vous interviendrez auprès de plusieurs squads agiles, dans des contextes fonctionnels riches et changeants, avec des interlocuteurs variés. Vos missions Intégré(e) au sein du Chapitre Data, vous serez amené(e) à : Contribuer à la définition de l’architecture Data en lien avec les architectes et les équipes projets Concevoir, affiner et développer des pipelines de collecte, de traitement et de stockage de données issues de multiples sources Assurer les tests unitaires et automatisés afin de garantir la qualité des livrables Participer aux déploiements sur les différents environnements (développement, test, production) Suivre les mises en production, assurer le support et traiter les éventuels incidents Participer activement à l’amélioration continue, notamment en promouvant de bonnes pratiques de développement au sein de l’équipe Environnement technique Big Data : Spark (batch & streaming), Cloudera, Kafka (atout) Langages : Java, Shell (appréciés) Bases de données : HDFS, Hive, HBase, Phoenix, MongoDB DevOps & monitoring : Git, Jenkins, Artifactory, XL Release, ELK, Grafana Méthodologie : Scrum / Agile

Notre client dans le secteur Banque et finance recherche un/une Expert MongoDB et solutions Big data H/F Description de la mission : Le pôle infrastructure et production informatique du Groupe de notre client, recherche un expert MongoDB pour accompagner son équipe Big Data. À ce titre, vos principales missions seront : - Comprendre l'historique des différents travaux menés en amont pour apporter votre expertise à l'équipe - Adopter une posture de conseil afin d'accompagner leur partenaire interne dans leur intégration progressive vers les nouvelles plateformes et technologies déployées par le socle (Big Data, Data…) en intégrant les principes de méthodologie Agile; - Participation aux projets - Co-construction (Consommateurs, Cluster, Socle) des applications consommant le Big Data - Montée en compétence des ressources internes dont un alternant - Traitement des incidents N2 et + - Traitements et exécutions des changements - Reporting & Documentation - Suivi des usages - Capacity planning

Merci de bien lire l'annonce ci dessous et vérifier que vous correspondez au besoin. Nous recherchons exclusivement des candidats basés à Vannes ou en Bretagne . Merci de ne pas envoyer de candidature si vous êtes situés hors de cette zone géographique. En tant que Data Engineer , votre mission principale sera de produire des solutions techniques robustes et performantes pour exploiter au mieux les données du client. Cependant, votre rôle ne se limitera pas à l’aspect technique : vous serez également un partenaire stratégique des métiers , capable d’identifier leurs besoins, de comprendre leurs enjeux et de proposer des solutions techniques adaptées. Vos responsabilités : Concevoir, développer et maintenir des pipelines de données performants et évolutifs Participer à la définition de l'architecture Data Développer les solutions de collecte et de stockage des données Mettre en place les tests unitaires et automatisés Garantir la qualité, la sécurité et l’intégrité des données tout au long de leur cycle de vie. Implémenter des solutions qui optimisent la gestion des données pour les équipes métier. Collaborer étroitement avec les équipes métier pour comprendre leurs objectifs stratégiques. Faciliter la communication entre les équipes techniques et les non-techniciens Vous serez à la croisée des chemins entre technique et métier , jouant un rôle clé pour transformer les données en un véritable levier de décision. Votre capacité à allier expertise technique et vision stratégique fera de vous un acteur indispensable pour relever les défis de l’entreprise.

Dans le cadre d’un vaste programme de transformation digitale, CBX Group accompagne l’un de ses clients dans la mise en place d’une plateforme Data Big Data . Nous recherchons plusieurs Data Engineers expérimentés pour renforcer les équipes en charge du design et développement de traitements batch & stream , avec exposition des données via API & BI. 🎯 Vos missions : Analyser les besoins métiers avec les Product Owners Développer des pipelines en Spark SQL & Java Spark Concevoir les traitements de données temps réel (Kafka, Mongo…) Documenter dans Confluence, assurer support & maintenance Optimiser et tunner des traitements Spark Participer au design des usages bigdata avec le métier et les PO Participer aux rituels agiles de la squad (Scrum) 💡 Profil recherché : Diplômé·e en informatique (bac+5) 5 ans d'expérience minimum en environnement Big Data Maîtrise de Spark Java, Spring Boot, CI/CD Bonne compréhension des architectures microservices & API REST Anglais pro et excellent français 🧰 Stack technique : Cloudera / MAPR, Java 11/17/21, Spark 2 / 3 , Spring Boot, Kafka, MongoDB, Jenkins, Kubernetes, ArgoCD, Sonar… ✅ Cadre de la mission : Hybride ( 50% TT) Rémunération selon le profil Durée : 3 ans Démarrage : ASAP 📩 Postule ici via notre formulaire : 📧Une question ? Écris-nous sur

Dans le cadre du renforcement des plateformes Big Data d’un de nos clients grands comptes, nous recherchons un Architecte Technique Big Data / Expert Hadoop . Vous serez garant de la conception technique , de l’ évolution et de la fiabilité de l’écosystème Hadoop au cœur des usages analytiques et métiers. Missions principales : Définir et faire évoluer l’ architecture technique de la plateforme Big Data (Hadoop, Spark, Kafka...). Assurer la conception et l'intégration de solutions techniques robustes, scalables et sécurisées. Apporter une expertise sur les choix d’outils et d’infrastructures liés à l'écosystème Hadoop. Piloter la mise en œuvre des bonnes pratiques d’architecture , de performance, de sécurité et de gouvernance. Collaborer étroitement avec les équipes Data Engineering, DevOps, Sécurité et Métiers. Industrialiser les processus d’intégration, de traitement et de supervision des données. Contribuer à l’ automatisation et à l’ optimisation des pipelines de données

Dans le cadre d’un projet stratégique lié à l’industrialisation de nouvelles lignes de production, nous recherchons un Data Engineer Sénior pour intervenir sur la conception et le développement de flux de données. La mission consiste à spécifier, développer et maintenir des pipelines d’ingestion et de transformation de données dans un environnement Big Data. Le consultant interviendra en régie, au sein d’une équipe Data pluridisciplinaire, en lien avec les équipes IT et métiers. Expérience : Minimum 2 ans en tant que Data Engineer dans des environnements Big Data

Contexte Dans le cadre de projets data en environnement on-premise, nous recherchons un Développeur Big Data confirmé maîtrisant l’écosystème Cloudera pour intervenir sur le traitement de données batch à forte volumétrie. Livrables Développer et optimiser des traitements batch sur plateforme Cloudera. Implémenter des jobs Spark (Scala) et des requêtes Hive. Assurer la maintenance et l'amélioration des pipelines existants. Participer aux revues de code, aux tests et à l’industrialisation. Compétences clés 5 ans d’expérience minimum en environnement Big Data. Maîtrise de l’écosystème Cloudera on-premise. Très bonne pratique de Scala, Spark et Hive. Autonomie, rigueur et bon esprit d’équipe.

Dans le cadre d’une mission d’audit stratégique à court terme, nous recherchons un expert indépendant en Big Data et architectures de calcul distribuées pour intervenir sur l’analyse d’une plateforme Hadoop/Cloudera utilisée dans un contexte de pricing Front Office . L’objectif : évaluer la robustesse, la scalabilité et la qualité d’implémentation actuelle d’un use case de calcul de prix distribués à très haute volumétrie (plusieurs millions de requêtes par jour), et formuler des recommandations concrètes pour les équipes de développement et de production applicative/infrastructure. Vous interviendrez notamment sur l’étude des éléments suivants : Performance et capacité de la plateforme Scala/Spark sur Hadoop Intégration avec une grille de calcul DataSynapse Préemptions, priorisation, organisation des traitements et des commandes Monitoring, gestion mémoire, modèles d’exécution distribuée Bonnes pratiques d’admin Cloudera, clusters partagés et SLA

Dans ce cadre, la prestation consiste à contribuer à/au(x) : - Projets de migration vers notre nouveau Datalake sur infra “Azure” - Projets de maintenance évolutive des Use Cases Data déjà existants - La stratégie Big Data du groupe SG (mise en place d'un modèle d'entreprise) - Stratégie d'implémentation lors de la phase de cadrage projet - Chiffrage des projets du chapter, en lien avec MOE et MOA - La mise en place de la road map technique des projets - L'implémentation opérationnelle (Dev / Test) des projets - Suivi et mise à jour de la road-map technique globale - Partage des échéances techniques - Suivi de l'avancement des développements et de l'intégration dans le SI. - La remontée des alertes, la proposition et la réalisation de plans de mitigation.