Trouvez votre prochaine offre d’emploi ou de mission freelance Cloudera

Je cherche pour un de client un Data Engineer Sénior (+7 ans) sur Vannes avec 3 jours sur site La mission s'effectuera dans le domaine Risques au sien de la squad en charge de la notation des entreprises. La squad est constituée d'un Product Owner, un Scrum Master et d'équipiers BA et IT. Le besoin est d'accompagner la squad dans un contexte de développement et de maintenance de solutions Data (Teradata, bases Hive, Phoenix, HDFS) et d'API Springboot. Tâches : - Assure le développement et l intégration des évolutions sur le périmètre des solutions de la Squad - Prépare, réalise la mise en production avec les équipes expertes; assure le SAV - Gère et maintient la documentation fonctionnelle et technique - Contribue à l assistance à l utilisation des solutions - Contribue aux séances d'affinage technique en phase de conception - Réalise une veille technologique régulière pour être au fait des dernières tendances - Contribue à alimenter le contenu du backlog pour prévoir les développements futurs - Analyse du patrimoine existant

Je recherche un Ingénieur Big Data / Administrateur Hadoop-Cloudera (CDP) confirmé à senior pour une prestation d'accompagnement dans le cadre de la maintenance et la construction des plateformes Hadoop Cloudera (CDP). Ainsi qu'un accompagnement au développement d'un ensemble des DATA Services et challenge des fonctionnalités à développer et les standards de travail. Vous contribuerez : · A l'installation de cluster · Au monitoring et à l'administration des outils Big Data · A l'administration de cluster · A l'upgrade des distributions et des composants Hadoop · A l'installation des différents composants sur Hadoop · Au support et à la résolution des problèmes N2 et N3 · A la mise en place d'environnements de développement et de test · A la sécurisation des clusters Compétences techniques requises · Installation et configuration des différents distributions sur Hadoop : · Installation et configuration des différents composants : Zookeeper, HDFS, Spark, Hive, Kerberos, Sentry, Anaconda, Hue, Kafka… · Monitoring des clusters avec Ambari, Cloudera manager, … · Administration des clusters : droits d'accès, Policy Ranger, création d'environnements… · CI/CD Ansible, Jenkins,… · Méthodes agiles : Scrum, Safe, Kanban, … Profil recherché Une expérience significative dans le cadre de projets Big Data sur une plateforme distribution Hadoop & CDP. · Anglais opérationnel et bonne aisance en communication · Capacité d'analyse et d'adaptation · Force de proposition, la veille technologique.

Contexte : Au sein des équipes de production Data, l'ingénieur assure le maintien en conditions opérationnelles (MCO) des plateformes décisionnelles et Big Data du groupe : Teradata, Entrepôt de Données & Usages, Cloudera, Datalayer. Il intervient également sur un chantier structurant de migration des traitements batch Big Data de l'ordonnanceur DollarU vers Control-M. Missions : Maintien en conditions opérationnelles des plateformesParticipation aux différentes réunions de suivi (production, exploitation, comités techniques) Intervention sur les incidents de production Pilotage des incidents et des problèmes, et sollicitation des entités compétentes en cas de besoin (Système, Stockage, Réseau, Éditeurs…) Déploiement des nouvelles versions applicatives et des patchs correctifs, en coordination avec la MOA et la MOE Déploiement de nouveaux batchs et flux de transferts, en veillant à la conformité avec l'existant et les nomenclatures en place Mise à jour des documentations d'exploitation (fiches consigne, dossiers d'exploitation, procédures) Coordination des tâches de l'équipe Migration des traitements batch Big Data (DollarU → Control-M)Définition des lots de migration en fonction des contraintes de production Contrôles de cohérence des données utilisées selon les environnements cibles Adaptation des scripts et des variables à l'environnement Control-M Vérification du bon fonctionnement en Pré-Production, puis en Production Participation aux comités de suivi Coordination des tests et du plan de migration avec les MOE Adaptation des consignes d'exploitation à la nomenclature spécifique Control-M Conditions d'exerciceLocalisation : site client / télétravail partiel selon la politique en vigueur Rythme : horaires de production, avec possibles astreintes et interventions en heures non ouvrées (HNO) lors des mises en production Langue : français courant ; anglais technique (lecture de documentation) Livrables attendusRésolution et suivi documenté des incidents et problèmes Mises en production réalisées conformément au processus de changement Documentation d'exploitation à jour (fiches consigne, dossiers d'exploitations Comptes rendus de comités de suivi

🚀 Tech Lead Data / Expert Teradata & Talend – Lille - ASAP - 4 ans de projet 🚀 📍 Lille - 2 jours par semaine puis 2 jours par mois post-onboarding 🏠 Freelance ONLY 📅 Démarrage ASAP 📆 Projet de 4 ans - Contrats annuels Pour l'un de nos clients, nous recherchons un Tech Lead Teradata disposant aussi d'une expertise Talend pour accompagner des projets stratégiques autour des plateformes décisionnelles. 🎯 Les attendus • Expertise Teradata (Build) • SQL avancé • Modélisation Data Warehouse (Étoile / Flocon) • Talend • Data & BI • Python (un plus) • Expérience en revue de conception, optimisation des développements et accompagnement des équipes techniques Tu te reconnais dans ce profil ou tu connais quelqu'un qui pourrait être intéressé ? N'hésite pas à me contacter en message privé ou à m'envoyer ton CV. #Data #Teradata #BusinessIntelligence #SQL #Talend #BI #Lille #freelance

Mission : Lead Transformation Data Contexte de la missionAu sein de la Direction des Systèmes d'Information d'un grand groupe, intervention sur la transformation de la plateforme Data afin d'accompagner son évolution vers une architecture hybride, orientée Data Driven et Data Product. La mission s'inscrit dans une équipe d'expertise Data transverse, en étroite collaboration avec les équipes métiers, les équipes Data Platform, DataOps et les architectes SI, avec pour objectif de définir les standards d'architecture et de garantir la cohérence des solutions Data à l'échelle du système d'information. MissionsDéfinir les trajectoires d'évolution de la plateforme Data et contribuer à la stratégie de transformation Data. Concevoir les architectures cibles en garantissant leur alignement avec le schéma directeur du SI. Définir et formaliser les standards, normes et patterns d'architecture Data réutilisables. Challenger les choix d'architecture sous les angles de la performance, de la scalabilité, de la maintenabilité et de la gouvernance. Participer à l'évaluation des solutions techniques et aux décisions d'architecture structurantes. Accompagner les projets lors des phases de cadrage et réaliser des revues d'architecture. Assurer une veille technologique sur les solutions Data et les architectures Cloud hybrides. Collaborer avec les équipes Data Platform, Data Engineering, DataOps et Architecture afin de garantir la cohérence des implémentations. Promouvoir les bonnes pratiques d'architecture, de gouvernance et de Data Engineering auprès des différentes équipes.

Contexte de la mission Dans le cadre d'un programme de transformation digitale d'envergure, vous rejoindrez une équipe agile dédiée au développement d'une plateforme de données temps réel. Cette plateforme permet de centraliser, traiter et valoriser des données clients afin de proposer de nouveaux services digitaux et d'accompagner la modernisation du système d'information. Vous évoluerez au sein d'un environnement collaboratif, orienté qualité de code, amélioration continue et excellence technique. Vos missions Développer et mettre en œuvre de nouvelles fonctionnalités à partir des besoins métiers priorisés Concevoir des solutions techniques robustes et évolutives. Participer aux choix d'architecture et aux orientations techniques de l'équipe. Concevoir et développer des API. Automatiser les tests et promouvoir les bonnes pratiques de développement. Garantir la qualité, la performance et la maintenabilité des applications. Assurer le bon fonctionnement des solutions en production. Accompagner les membres de l'équipe dans une démarche d'amélioration continue. Environnement technique Langages & Frameworks Java Scala Apache Spark (Streaming & Batch) Apache Kafka Data & Big Data Hadoop / Cloudera HDFS Hive HBase Phoenix API & Intégration Développement d'API DevOps & Qualité GitLab CI/CD Jenkins Artifactory SonarQube ELK Grafana XRAY JUnit Automatisation des tests / Craftsmanship Méthodologie Agile Scrum

Missions principales: Assurer le maintien en conditions opérationnelles (RUN/MCO) de la plateforme Big Data. Prendre en charge le support N3 et la résolution d'incidents complexes. Administrer et optimiser les environnements Cloudera CDH/CDP. Piloter et superviser les composants Hadoop (HDFS, YARN) et Spark. Gérer les sujets de sécurité (Kerberos, Ranger). Contribuer à l'automatisation et à l'industrialisation des opérations (Jenkins, CI/CD). Apporter un leadership technique auprès des équipes. Participer aux projets d'évolution vers Azure et Databricks. Compétences requises: Indispensables : Cloudera Manager Hadoop (HDFS, YARN) Spark RUN / MCO de plateformes critiques Support N3 et gestion d'incidents Kerberos / Ranger Jenkins et outils CI/CD Linux Appréciées : Azure Databricks Scripting Shell ou Python Environnements Cloud hybrides

ContexteLe bénéficiaire souhaite une prestation d'accompagnement dans le cadre de la maintenance et la construction des plateformes Hadoop Cloudera (CDP). Il s'agit également d'un accompagnement au développement d'un ensemble des DATA Services, avec un challenge sur les fonctionnalités à développer et les standards de travail. MissionsInstallation de cluster Monitoring et administration des outils Big Data Administration de cluster Upgrade des distributions et des composants Hadoop Installation des différents composants sur Hadoop Support et résolution des problèmes N2 et N3 Mise en place d'environnements de développement et de test Sécurisation des clusters