Trouvez votre prochaine offre d’emploi ou de mission freelance Cloudera

Almatek recherche pour l'un de ses clients Un Data Engineer Sénior / Big Data / Spark / Cloudera sur Paris. Contexte de la mission Le projet HALO est un programme stratégique de digitalisation des parcours bancaires (vente en ligne, souscription, IA). La Direction Data met en place une plateforme Big Data pour alimenter les cas d’usage métiers à forte valeur ajoutée. Il s’agit d’un nouveau projet (build) avec des enjeux de performance, d’intégration IA et de montée en charge. L’environnement technique est centré sur un écosystème Hadoop/Cloudera on-premise. Missions principales • Participer à la définition de l’architecture Data en lien avec les architectes et la squad • Affiner les User Stories avec le PO/BA, concevoir et développer les pipelines de collecte et de stockage des données • Orchestrer les flux batch et temps réel (Spark batch + Spark Streaming) • Mettre en œuvre les tests unitaires et automatisés • Déployer le produit dans les différents environnements (CI/CD) • Garantir le bon fonctionnement en production : monitoring, gestion des incidents, optimisation • Accompagner l’équipe dans une logique d’amélioration continue de la qualité du code Environnement technique Catégorie Technologies Framework Big Data Hadoop Cloudera (requis) Traitement Spark, PySpark, Spark Streaming (requis) — Scala (apprécié) Messaging Kafka, Kafka Connect, Kafka Streams (apprécié) Langages SQL (requis), Scala, Java, Shell, Python Bases de données SQL : Hive, Phoenix — NoSQL : HBase, MongoDB DevOps / CI-CD Git, Jenkins, Artifactory, XL Deploy, XL Release Monitoring ELK Stack (Elasticsearch, Logstash, Kibana), Grafana Gouvernance RGPD, Data Lineage, Catalogage

Data Engineer Big Data / BI – Scala, Spark, SQL, Hive, Cloudera (H/F) 💼 Contrat : CDI 🏢 Entreprise : ADBI – Expert en Data Management et transformation digitaleContexte du poste Dans le cadre de l’évolution de ses plateformes Big Data et décisionnelles, ADBI recherche un(e) Data Engineer pour intervenir sur des projets d’intégration, de transformation et d’industrialisation de données. Vous participerez à la migration et à l’optimisation d’environnements Big Data (Cloudera, Spark, Hive, Scala) et contribuerez à la mise en place de solutions BI performantes et scalables.

CONTEXTE Dans le cadre de Solutions Data, une équipe Conseil et Valorisation Data recherche un renfort senior immédiat. Le périmètre couvre l'accompagnement des directions métiers dans leurs usages de la donnée, sur un environnement décisionnel SAS et une plateforme Big Data Cloudera. Le profil intervient en proximité des métiers, depuis le cadrage jusqu'à la recette fonctionnelle, avec une forte dimension conseil et une exigence de qualité, de délai et d'engagement. RÔLE ET RESPONSABILITÉS PRINCIPALES Recueillir et analyser les besoins des directions métiers Apporter conseil aux métiers sur l'exploitation et la valorisation de la donnée Participer au cadrage des projets Data : études d'impact et de faisabilité Contribuer aux études d'opportunité sur le volet Data Garantir la cohérence fonctionnelle et technique du SI Réaliser les recettes fonctionnelles, qualifier les anomalies et suivre les corrections Assurer le support et l'assistance métier sur les usages Data – Maintenir à jour la base documentaire du patrimoine LIVRABLES ATTENDUS Modélisations de données Spécifications Fonctionnelles Générales (SFG) Spécifications Fonctionnelles Détaillées (SFD) Rapports de recette fonctionnelle et suivi des anomalies Documentation du patrimoine applicatif et fonctionnel

Nous recherchons un Architecte Data / Expert Data Modélisation pour le compte d'un de nos clients dans le secteur de l'assurance. Le consultant intégrera l'équipe Architecture Solutions SI de la Direction Stratégie SI Architecture et Cloud. Il accompagnera les projets dans la définition de leur architecture data et prendra en charge la modélisation fonctionnelle des objets métiers. Rôles et responsabilités Organiser et suivre l'accompagnement des projets dans la définition de leur architecture de solution au niveau data Définir, promouvoir, enrichir et suivre la mise en œuvre du cadre normatif de constitution du SI Réaliser la modélisation fonctionnelle des objets Métiers dans le cadre du Modèle Fonctionnel Groupe Mettre à jour la cartographie dans Mega HOPEX Accompagner les équipes de réalisation dans la définition des Modèles Logiques de Données (MLD) déclinés depuis le MFC Apporter un support technique DBA Études sur les Modèles Physiques de Données (MPD) Définir les architectures solutions (fonctionnelles/data) de la phase de faisabilité à la mise en production Produire les livrables d'architecture (dossiers, mise à jour du référentiel) Présenter les solutions envisagées dans les instances de validation Délivrer des avis d'architecture et porter l'engagement vis-à-vis du demandeur Coordonner l'activité d'architecture sur certains périmètres

Rejoignez TRUST’IT 🚀 Créée en 2016, TRUST’IT compte aujourd’hui plus de 100 collaborateurs et un chiffre d’affaires de plus de 10 M€. Spécialistes de l’infrastructure, de la production et des métiers fonctionnels (Business Analyst, PO, Scrum Master…), nous proposons principalement des missions longues (2 à 3 ans). Notre force : une culture d’entreprise familiale , un turnover quasi nul et un mot d’ordre clair – la confiance . Chez TRUST’IT, nous plaçons l’épanouissement de nos collaborateurs au cœur de notre réussite. Nos avantages ✅ 25 CP + 10 RTT ✅ Mutuelle/prévoyance 100 % gratuite pour vous et votre famille ✅ Navigo intégralement remboursé + panier repas ✅ Prime d’intéressement & de cooptation (1 500 €) ✅ Chèques cadeaux, vacances, culture, rentrée scolaire ✅ Accès gratuit à + de 3 000 infrastructures sport & bien-être TRUST’IT, ce n’est pas une ESN comme les autres… c’est une famille ! Nous recherchons pour notre client, un Data Engineer (H/F) Contexte : Des tâches quotidiennes liées au maintien de la production en condition opérationnelle. Vos interlocuteurs privilégiés seront les équipes de production applicative, les équipes infrastructures, les plateformes internationales, mais également les équipes métiers pour lesquelles vous apporterez votre support et votre expertise technique. Missions : Conception et mise en œuvre de l'ingestion et du stockage de données : Identifier et formaliser les besoins des métiers en matière de collecte et de stockage de données. Développer des solutions d'acquisition de données via API. Concevoir et implémenter des architectures de stockage de données robustes (Ex: Ozone, Hadoop, Druid, Clickhouse…). Valider la qualité des développements par des tests unitaires et d'intégration. Automatiser les traitements de données via la mise en place et la maintenance de batch. Valorisation et sécurisation des données : Industrialiser les processus de nettoyage et de transformation des données. Gérer et documenter des bases de données hétérogènes, en intégrant diverses sources de données. Veiller à la conformité RGPD dans la gestion du cycle de vie des données. Superviser l'exploitation et assurer la maintenance corrective et évolutive des systèmes de données. Intégration et suivi des modèles prédictifs : Industrialiser le déploiement de modèles statistiques et de machine learning. Mettre en place des dispositifs de validation et de monitoring des modèles. Assurer le suivi opérationnel et la maintenance des modèles intégrés aux applications. Contribution au pilotage projet : Définir les spécifications techniques précises en appui de l'analyse des besoins. Environnement technique : Les composants basés sur le logiciel de l’éditeur Cloudera CDP 7.1 :Hbase, Hive, Kafka, Solr, Knox, Spark,Ranger, Zookeeper, Kerberos LDAP... •Être force de proposition sur les évolutions techniques du périmètre Data avec la nouvelle offre containérisée : Cloudera Data Services (Infra Openshift K8s) •Contribuer à l'élaboration et à l'exécution des stratégies de migration des clusters Hadoop Cloudera. •Aisance avec l’écosystème Apache (Outils OpenSource),Build (Java, Maven, Gradle...), Automatisation avec Ansible •Connaissance Trino/Starburst, AirFlow, Flink •Participer à la résolution de problèmes complexes sur les plateformes Data (Capacité d’analysedes incidents applicatif de type Hive, Yarn, Spark...) •Apporter un support quotidien aux équipes applicatives et métiers dans leurs études de cas d’usage, leurs problématiques de développement ou de montée en charge. •Le poste est soumis à astreintes et interventions hors périodes ouvrées par rotation .Couverture horaire de l’équipe : 8h/19h

Qui sommes-nous ? Anafi Consulting est un cabinet de conseil en transformation technologique et organisationnelle, basé à Paris. Nous accompagnons nos clients grands comptes dans leurs projets stratégiques autour du Cloud , de la Data , du DevOps et des plateformes IT , en combinant expertise technique, vision produit et accompagnement au changement. Votre rôle Dans le cadre du renforcement d’une équipe dédiée à l’adoption des offres technologiques, nous recherchons un(e) Customer Technology Advisor (Adopt Owner) . Vous serez au cœur de la relation entre les équipes métiers (clients internes) et les pôles technologiques , avec pour objectif de faciliter l’adoption, la compréhension et l’usage des solutions IT (Cloud, Data, plateformes, environnements conteneurisés et outillage DevOps). Votre rôle combine expertise technique, coordination produit et accompagnement des équipes . Vos missions principalesRelation & Pilotage Être le point de contact privilégié entre les entités clientes et les équipes technologiques. Collecter, qualifier et prioriser les besoins et irritants métiers . Piloter les demandes , leur suivi et leur traitement. Assurer la co-construction des offres avec les équipes produit. Faciliter l’alignement entre les besoins métiers et les capacités techniques des plateformes Cloud, Data et DevOps . Adoption & Acculturation Accompagner les équipes dans l’adoption des nouvelles offres et fonctionnalités. Animer des présentations, ateliers, webinars et sessions d’acculturation. Apporter un premier niveau de support technique et de conseil. Promouvoir les offres et faciliter leur appropriation. Sensibiliser les utilisateurs aux bonnes pratiques autour des plateformes OpenShift , des chaînes CI/CD Jenkins et des services Data/Cloud. Expertise & Innovation Participer à l’expérimentation de nouvelles technologies ( sandbox, POC ). Être référent sur les technologies Data, Cloud, conteneurisation, orchestration et bases de données . Contribuer aux roadmaps produits et aux décisions stratégiques (comités, arbitrages). Identifier les impacts techniques, organisationnels et métiers des évolutions. Contribuer à la promotion et à l’adoption de solutions basées sur OpenShift , Jenkins , architectures distribuées et services managés Cloud. Suivi & Qualité Suivre les indicateurs d’adoption et de performance des offres. Assurer la cohérence entre services délivrés et niveaux de service attendus . Remonter les dysfonctionnements et contribuer à l’amélioration continue. Participer à l’amélioration de l’expérience utilisateur sur les offres de plateformes, de déploiement et d’industrialisation. Environnement techniqueBig Data & NoSQL Data Lakehouse Cloudera Teradata MongoDB Bases de données PostgreSQL Oracle MySQL SQL Server Redis Cloud Public (GCP) BigQuery Firestore Conteneurisation, plateformes & DevOps OpenShift Kubernetes Docker Jenkins GitLab CI/CD / outils d’industrialisation API management, déploiement applicatif et automatisation Environnements techniques Data Streaming Architectures distribuées Plateformes applicatives et environnements conteneurisés

Le profil interviendra pour définir, concevoir et accomagner la construction de l'architecture cible Data. Ses missions principales seront de : Définir l’architecture cible Data : concevoir l’architecture Data cible n, alignée avec la stratégie globale Data et les principes Data‑Centric et définir les patterns d’intégration et les couches fonctionnelles de la future plateforme (ingestion, traitement, stockage, exposition). Concevoir l’architecture de la nouvelle plateforme Data : concevoir l’architecture technique globale de la plateforme, en intégrant l’écosystème existant (Teradata, Hadoop) et la stratégie d’évolution (cloud ou on‑prem, gouvernance, scalabilité). Proposer la trajectoire d’évolution permettant la transition vers la nouvelle plateforme (stratégie de migration, coexistence, phasage). Modélisation des données et harmonisation : concevoir les modèles de données harmonisés (modèle cible, datamarts, vues métiers, glossary). Définir les principes de modélisation à appliquer selon les usages : analytique, opérationnel, data products. Data Products & accompagnement métiers : accompagner les équipes métiers dans la conception et la structuration des data products. Garantir la cohérence des data products avec les modèles de données, les standards d’intégration et l’architecture cible. Définition et formalisation des standards Data : définir les standards d’intégration, de transformation, de stockage et d’exposition des données. Proposer et formaliser les bonnes pratiques autour des outils de l’écosystème (outils d’ingestion, qualité, orchestrateurs, catalogage, gouvernance).

Dans le cadre du développement des activités autour de la valorisation de la donnée, nous recherchons un(e) Business Analyst Data disposant d’une expérience significative, afin de renforcer une équipe dédiée au conseil et à l’accompagnement des métiers sur les usages Data. Vous interviendrez au sein d’une équipe spécialisée en data, en lien direct avec les directions métiers, sur des sujets à forts enjeux autour de l’exploitation, de la qualité et de la gouvernance des données. La mission s’inscrit dans un environnement exigeant, nécessitant une forte capacité d’analyse, de conseil et d’accompagnement, ainsi qu’une bonne compréhension des enjeux liés aux systèmes décisionnels et aux plateformes Big Data. Vos principales missions seront les suivantes : Recueillir et analyser les besoins métiers autour des usages de la donnée Accompagner les directions métiers dans l’exploitation et la valorisation de leurs données Participer au cadrage des projets Data (études d’impacts, faisabilité, opportunité) Apporter un rôle de conseil sur les solutions et usages Data Garantir la cohérence fonctionnelle et technique du système d’information Réaliser les recettes fonctionnelles, qualifier les anomalies et suivre leur résolution Produire les livrables fonctionnels (modélisation de données, SFG, SFD) Maintenir et enrichir la documentation du patrimoine Data Assurer le support et l’assistance auprès des utilisateurs métiers Suivre la qualité de service et la satisfaction métier (coût, délai, qualité) Contribuer activement aux réflexions autour de la gouvernance et de la qualité des données L’environnement technique et collaboratif comprend notamment des solutions décisionnelles (Oracle, Informatica) ainsi qu’une plateforme Big Data de type Cloudera. La mission est basée à Niort avec 3 jours de présence sur site par semaine.

Dans le cadre du renforcement d’une équipe Data au sein d’un grand groupe du secteur financier, nous recherchons un Développeur Data confirmé basé à Nantes . Vous interviendrez sur des projets stratégiques liés à l’ingestion, la transformation et la valorisation des données dans un environnement Big Data. Vos missions : Développer des user stories liées à l’ingestion et transformation de données (ETL / SQL) Réaliser les tests unitaires et participer à la recette fonctionnelle Déployer les développements sur différents environnements Rédiger la documentation technique Participer à l’analyse et au chiffrage des besoins Assurer le suivi des traitements en production (run) Contribuer aux cérémonies Agile Scrum

Envie d’un nouveau challenge... CELAD vous attend ! Nous poursuivons notre développement et recherchons actuellement un(e) Data Engineer Confirmé/ Sénior H/F pour intervenir chez un de nos clients. Contexte : Vous intégrerez un Chapitre Data dynamique et intervenez sur la conception et la réalisation de solutions Big Data dans un environnement Cloudera. Vos travaux permettront de rendre les données issues de multiples sources accessibles et exploitables par les équipes métiers. Votre mission : Au sein d'une équipe projet, vous serez en charge de : - Participer à la définition de l’architecture Data en lien avec les architectes et la Squad - Concevoir, affiner et développer les solutions de collecte et de stockage des données - Mettre en œuvre les tests unitaires et automatisés - Déployer les produits dans les différents environnements - Garantir le bon fonctionnement des solutions en production et assurer le suivi / l’assistance / la gestion des incidents - Accompagner l’évolution des pratiques de l’équipe dans une logique d’amélioration continue de la qualité du code - Contribuer à la fabrication des produits des Squads dans un environnement Cloudera - Être force de proposition et expertise au sein du Chapitre sur les technologies manipulées

Envie d’un nouveau challenge... CELAD vous attend ! Nous poursuivons notre développement et recherchons actuellement un(e) Data Engineer Confirmé/ Sénior H/F pour intervenir chez un de nos clients. Contexte : Vous intégrerez un Chapitre Data dynamique et intervenez sur la conception et la réalisation de solutions Big Data dans un environnement Cloudera. Vos travaux permettront de rendre les données issues de multiples sources accessibles et exploitables par les équipes métiers. Votre mission : Au sein d'une équipe projet, vous serez en charge de : - Participer à la définition de l’architecture Data en lien avec les architectes et la Squad - Concevoir, affiner et développer les solutions de collecte et de stockage des données - Mettre en œuvre les tests unitaires et automatisés - Déployer les produits dans les différents environnements - Garantir le bon fonctionnement des solutions en production et assurer le suivi / l’assistance / la gestion des incidents - Accompagner l’évolution des pratiques de l’équipe dans une logique d’amélioration continue de la qualité du code - Contribuer à la fabrication des produits des Squads dans un environnement Cloudera - Être force de proposition et expertise au sein du Chapitre sur les technologies manipulées

Envie d’un nouveau challenge... CELAD vous attend ! Nous poursuivons notre développement et recherchons actuellement un(e) Data Engineer Confirmé/ Sénior H/F pour intervenir chez un de nos clients. Contexte : Vous intégrerez un Chapitre Data dynamique et intervenez sur la conception et la réalisation de solutions Big Data dans un environnement Cloudera. Vos travaux permettront de rendre les données issues de multiples sources accessibles et exploitables par les équipes métiers. Votre mission : Au sein d'une équipe projet, vous serez en charge de : - Participer à la définition de l’architecture Data en lien avec les architectes et la Squad - Concevoir, affiner et développer les solutions de collecte et de stockage des données - Mettre en œuvre les tests unitaires et automatisés - Déployer les produits dans les différents environnements - Garantir le bon fonctionnement des solutions en production et assurer le suivi / l’assistance / la gestion des incidents - Accompagner l’évolution des pratiques de l’équipe dans une logique d’amélioration continue de la qualité du code - Contribuer à la fabrication des produits des Squads dans un environnement Cloudera - Être force de proposition et expertise au sein du Chapitre sur les technologies manipulées

Nous recherchons un Architecte Data / Expert en Modélisation pour rejoindre une équipe d'Architecture Solutions SI. Votre mission consistera à définir l’architecture de données des projets stratégiques, en assurant la cohérence entre les besoins métiers et les objectifs de rationalisation du système d'information. Vos principales missions : Réaliser la modélisation fonctionnelle des objets métiers (MFC) à partir des modèles de référence. Assurer la mise à jour de la cartographie applicative et data sous Mega HOPEX . Accompagner les équipes de développement dans la déclinaison des modèles logiques (MLD) et physiques (MPD). Produire les dossiers d'architecture et porter les engagements techniques lors des comités de validation. Animer la communauté architecture et participer à l'acculturation des équipes aux normes de données. Environnement technique & méthodologique : Méthodes : TOGAF, UML, Merise. Frameworks : Scrum, Safe, Cycle en V. Écosystème : Java, Environnements Mainframe (Cobol/DB2) et Open (Oracle, PostgreSQL), Big Data (Cloudera), DataGalaxy.

Contexte : Business analyste pour accompagnement de l'équipe Conseil Valorisation de la Data. Dans le cadre de Solutions Data, nous avons besoins d’un profil de Business Analyst DATA/ AMOA Senior pour intervenir rapidement et venir renforcer l’équipe Conseil et Valorisation Data. MISSIONS principales missions : - Assurer une proximité et accompagner les direction métiers sur les usages autour de la donnée - Réaliser les études et apporter le bon conseil vers les métiers sur le volet Data - Assurer le support et l’assistance métier des usages Data - Contribuer à la production des livrables de niveau fonctionnel Et concrètement ? • Recueillir et analyser les besoins métiers, • Apporter le conseil nécessaire aux direction Métier sur l’exploitation de la donnée, • Participer au cadrage des projets Data (études d’impacts, faisabilité) • Contribuer aux études d’opportunité et de faisabilité sur le volet Data, • Garantir la cohérence fonctionnelle et technique du SI • Réaliser les recettes fonctionnelles, qualifier les anomalies et suivre les corrections • Produire des livrables fonctionnels (modélisations de données, SFG, SFD), • Tenir à jour la base documentaire du patrimoine, • Garantir la bonne satisfaction métier Data (qualité, engagement, cout, délai). Environnement technique • Ecosystème DATA SI Décisionnel (SAS) et plateforme Big Data (Cloudera) Pré-requis : Expérience dans des projets Data (SI Décisionnel, plateforme Big data) Sensibilité aux enjeux de gouvernance et qualité des données Connaissance du secteur assurance