Trouvez votre prochaine offre d’emploi ou de mission freelance HDFS (Hadoop Distributed File System)

Architecture et Conception : Concevoir, mettre en œuvre et maintenir l'architecture Hadoop en fonction des besoins de l'entreprise. Élaborer des plans d'expansion et d'évolution pour les clusters Hadoop. Collaborer avec les équipes de développement et d'infrastructure pour concevoir des solutions adaptées aux besoins spécifiques du projet. Installation et Configuration : Installer, configurer et déployer les clusters Hadoop en utilisant les meilleures pratiques. Gérer les configurations, les mises à jour et les correctifs des composants Hadoop. Surveillance et Optimisation : Surveiller les performances du cluster Hadoop et identifier les goulots d'étranglement. Optimiser les performances en ajustant la configuration, en mettant à l'échelle le matériel ou en optimisant les requêtes. Mettre en place des outils de surveillance et des alertes pour détecter les problèmes potentiels. Sécurité : Mettre en œuvre et maintenir des stratégies de sécurité robustes pour le cluster Hadoop. Gérer l'accès aux données sensibles et aux ressources du cluster en utilisant des technologies telles que Kerberos, LDAP, etc. Effectuer des audits de sécurité réguliers et remédier aux vulnérabilités identifiées. Gestion des Données : Concevoir et mettre en œuvre des pipelines de données pour l'ingestion, le traitement et la distribution des données. Assurer la qualité des données en mettant en place des processus de nettoyage, de normalisation et de validation des données. Intégrer et gérer différents types de données, y compris les données structurées, semi-structurées et non structurées. Automatisation et Orchestration : Automatiser les tâches courantes telles que la sauvegarde, la récupération, la gestion des ressources, etc. Mettre en place des workflows d'orchestration pour coordonner les tâches complexes entre les différents composants du cluster Hadoop. Développement et Support : Fournir un support technique aux équipes de développement et d'analyse des données. Développer des outils et des scripts personnalisés pour faciliter l'administration et la gestion du cluster Hadoop. Collaborer avec les équipes de développement pour optimiser les applications et les requêtes pour le cluster Hadoop. Formation et Documentation : Former les membres de l'équipe sur l'utilisation et la gestion du cluster Hadoop. Documenter les processus, les configurations et les bonnes pratiques pour faciliter la collaboration et le transfert de connaissances. Veille Technologique : Suivre les tendances et les avancées technologiques dans le domaine du Big Data et de l'analyse de données. Évaluer de nouvelles technologies et proposer des solutions innovantes pour améliorer l'efficacité et les performances du cluster Hadoop.

Contexte : Nous recherchons un expert en solution de stockage ayant de l'expérience en sécurité de la donnée. L'objectif est de challenger une solution d'AirGap proposée et d'assurer, avec un autre architecte déjà en poste, le choix de la meilleur architecture. Missions : Diriger le développement et l'amélioration de la surveillance de l'intégrité des données au sein de la solution Vault/Air Gap du client. Établir les stratégies de détection de la corruption des données, garantissant les plus hauts niveaux de sécurité et d'intégrité des données. Mettre en œuvre des techniques avancées pour la restauration des données et la vérification de l'intégrité dans les environnements de récupération. Travailler en étroite collaboration avec les équipes opérationnelles du client pour comprendre leurs défis centrés sur les données et proposer des solutions sur mesure. Effectuer une analyse approfondie et une amélioration continue des mesures de protection des données dans des contextes de haute sécurité. Environnement technique : Processus et procédures Services d’Infrastructure (Réseau/Sécurité, Stockage, Sauvegarde, Annuaire, DNS, etc.) Services d’administration (Bastions, Supervision, etc.) Ecosystèmes Mainframe Ecosystèmes Open (OS, Hyperviseur, Base SQL/NoSQL, etc.) Du Legacy à 80% sur des OS Windows à majorité. Du PureStorage en stockage et du Vault sur le management des secrets. Il faudra être les 3e premiers mois sur site (Fontenay-sous-Bois) puis 2 jours par semaine sur site.

Nous sommes à la recherche d'un ingénieur système avec un bon relationnel car sera en fort relation avec les utilisateurs bancaires : Mission : Participation aux travaux de l’équipe pour intégrer les évolutions des applications sur les activités suivantes : • Suivi du bon fonctionnement des applications en production et résolution d’incidents. • Déploiement, installation et configuration des différentes plateformes techniques • Paramétrage des services et des outils mutualisés (supervision, plan de production, sauvegardes…) Intervention sur les chantiers suivants : - Mise à jour des briques logicielles obsolescentes. - Accompagnement à la mise en production en lien avec l’équipe d’intégration.

En tant qu'Administrateur Sécurité Système Mainframe - Expert RACF, vous jouerez un rôle crucial dans la protection et la sécurisation des systèmes mainframe de l'entreprise. Vous serez responsable de la mise en oeuvre, de la gestion et de la maintenance des mécanismes de sécurité, en mettant particulièrement l'accent sur RACF (Resource Access Control Facility). Vous travaillerez en étroite collaboration avec les équipes techniques et opérationnelles pour garantir un niveau élevé de sécurité et de conformité réglementaire.

Nous recherchons un ingénieur de production pour les missions suivantes : - Pilotage projet (gestions des ressources, copils, reporting) - Prise en charge de l’intégration technique des solutions existantes et nouvelles. - Exploitation des plates-formes techniques en assurant le maintien en conditions opérationnelles. - Mise en œuvre des réponses aux audits externes et aux mises en conformités internes - Applications de la politique de sécurité des SI La mission proposée peut être soumise aux horaires décalés (intervention en HPO notamment) ainsi qu’à une participation au dispositif d’astreinte hebdomadaire et week-end. Il est impératif de pouvoir travailler en anglais (oral et écrit). - Gérer des incidents critiques : communication, diagnostic, correction, coordination d’experts en cellule technique. - Contact avec des cellules supports éditeurs. - Gérer des problèmes (incident récurrent avec plan d’action sur moyen/long terme) - Analyser, Gérer, Piloter des changements. - Supervision, veille technologique - Coordonner des multi-intervenants. - Réaliser l’interface entre les experts techniques et le support Editeur dont vous êtes l’interlocuteur privilégié. - Rédiger les manuels d’exploitation : procédures, sauvegardes, supervision, …

Envie d’un nouveau challenge... CELAD vous attend ! Nous poursuivons notre développement et recherchons actuellement un(e) Administrateur(rice) Système pour intervenir chez un de nos clients, dans le secteur du Numérique. Vos principales missions : Dans l’exercice de vos fonctions, vous serez en charge du/ de la : - Effectuer les opérations de déploiement d'une plateforme en utilisant l'infrastructure en tant que code (Terraform, Puppet, Rundeck,), en respectant les échéanciers du projet - Collaborer étroitement avec les équipes de développement pour fournir les plateformes de manière optimale - Élaborer et exécuter des tests avant la livraison d'une plateforme pour garantir sa conformité avec les pratiques et les exigences des clients - Fournir des retours d'expérience aux responsables techniques et aux experts afin d'améliorer continuellement les pratiques et les outils - Assurer un transfert efficace des plateformes aux équipes opérationnelles - Le travail se concentre exclusivement sur des machines virtuelles, qu'il s'agisse d'infrastructures sur site ou dans le Cloud Outscale : aucune utilisation de Docker, Kubernetes ou de microservices

Nous recherchons un expert JFrog passionné par la mise en place de pipelines CI/CD et possédant de solides compétences en administration système. Cette personne sera chargée de concevoir, implémenter et maintenir des pipelines d'intégration et de déploiement continus, ainsi que de gérer des systèmes d'exploitation et des bases de données. Le candidat idéal aura une expertise avérée dans l'utilisation d'outils JFrog et sera capable de fournir un support technique de haut niveau pour assurer la disponibilité et la performance des environnements de développement et de production. 1. Concevoir et mettre en place des pipelines CI/CD en utilisant des outils JFrog pour automatiser les processus de construction, de test et de déploiement des applications. 2. Administrer les systèmes d'exploitation, y compris la configuration, l'installation et la maintenance des OS. 3. Gérer les bases de données, en assurant leur disponibilité, leur performance et leur sécurité. 4. Assurer l'arrêt et le redémarrage de WebSphere Application Server selon les besoins du projet. 5. Consommer des API REST pour orchestrer les déploiements de packages sur des serveurs OVH, en assurant l'intégrité et la sécurité des déploiements. 6. Développer des scripts pour automatiser les tâches récurrentes et faciliter les opérations d'administration et de déploiement. 7. Documenter et décrire de manière détaillée toutes les étapes des processus de déploiement et d'administration, afin de faciliter la reprise du travail par d'autres membres de l'équipe. 1. Expérience avancée dans la mise en place de pipelines CI/CD, de préférence avec une expertise dans l'utilisation d'outils JFrog tels que Artifactory, Xray et Pipelines. 2. Solides compétences en administration système, y compris la gestion des systèmes d'exploitation (Linux, Windows) et des bases de données (MySQL, PostgreSQL, etc.). 3. Connaissance pratique de WebSphere Application Server et de ses processus d'arrêt et de redémarrage. 4. Capacité à consommer des API REST pour automatiser les déploiements sur des infrastructures cloud telles que OVH. 5. Compétences avancées en écriture de scripts, en utilisant des langages tels que Shell, Python, ou Groovy. 6. Aptitude à documenter clairement les processus et les configurations, afin de faciliter la collaboration et la reproductibilité des tâches.

Responsabilités Principales: Concevoir et mettre en œuvre des solutions d'automatisation pour le patching du système d'exploitation Red Hat vers Satellite. Collaborer avec les équipes techniques pour comprendre les besoins et les exigences du projet. Développer des scripts et des outils personnalisés pour automatiser les tâches de patching. Assurer la documentation complète des processus et des procédures mises en place. Fournir un support technique aux équipes opérationnelles pendant la mise en œuvre et la maintenance des solutions.

La mission : En tant que consultant Ingénieur Data au sein de la Cellule Qualité du Fixe (CQF) , vous serez en charge de : · L'exploitation de la plateforme Big Data de monitoring Wifi des Box : A ce titre vous aurez la charge : · Du monitoring des principaux KPI du système et la misé en œuvre des nouveaux KPI · Des investigations lors d'incident : Vous déclencherez et piloterez le fournisseur et / ou les autres entités de Bytel contribuant à son bon fonctionnement. · Vous serez le garant de mise à disposition des données issues du cluster HDFS. Vous aurez des scripts Scala / Spark à développer pour toute évolution à la demande de l'équipe Datascience ou en fonction des évolutions du système. · Vous assurez la mise en œuvre des politiques de sécurités et de sauvegarde, et appliquer tout patch ou correctif nécessaire à cette intégrité. · Du pilotage des fournisseurs externes et internes pour les évolutions de la plateforme, que ces évolutions portent sur le hardware, les applicatifs, ou l'architecture réseau. · La data ingénierie et l'exploitation de la plateforme Data en architecture de type microservices, basée sur Kubernetes et OpenShift. Vos tâches seront de : o Assurer la supervision et débogage du système via Openshift o S’assurer du bon fonctionnement des applicatifs (Spark, MinIo, Jhub, MySQL, Airflow) o Contrôler les volumes et consommations Hardware de la plateforme o Débugger les pods en cas d’erreur · Assurer l’écriture des graphes Helm pour les déploiements applicatifs o Ecriture de charts Helm pour le déploiement de nouveaux applicatifs o Tester les nouveaux graphes sur la plateforme de test o Déployer et patcher les applicatifs déjà existants avec Helm o Assurer la pérennité de la plateforme en gérant efficacement les images et graphes via GitLab · Assurer la gestion des utilisateurs et des règles de gestion du Datalake o Gestion des buckets et utilisateurs o Création de points de stockage et des règles de gestion associées o Création de scripts pour le stockage de Parquets · Assurer le fonctionnement du déploiement continu avec GitLab o Administration des images de production Gitlab et DockerHub Objectifs et livrables TDB des indicateurs

Nous poursuivons notre développement et recherchons actuellement un.e Administrateur mainframe RACF pour intervenir chez un de nos clients dans le secteur bancaire. Votre mission consiste à intervenir sur la gestion et l'administration du mainframe RACF, en assurant la sécurité et l'intégrité des données sensibles de notre client bancaire. Vos fonctions : -Administrer et maintenir les environnements mainframe RACF. -Assurer la sécurité des systèmes et des données en mettant en place des stratégies efficaces. -Analyser les besoins des utilisateurs et proposer des solutions adaptées. -Collaborer avec les équipes techniques pour garantir la disponibilité et les performances des systèmes.

Opportunité de mission en tant que Product Owner expérimenté File Transfer dans le secteur Aéroportuaire. - Participer aux réunions avec les représentants des projets dev et gère les priorités des différentes demandes - Participer activement à la roadmap trimestrielle - Créér les épics pour les demandes de transfert de fichier - S’assurer de la bonne qualité des développements (d’où la nécessité de connaître un minimum le monde des transferts de fichiers et XFB en particulier) - Aider au projet de remplacement de la solution XFB (en favorisant la prise de décision) - Participer à la création d’un environnement de travail collaboratif et ouvert - Accompagner le Scrum Master avec de maximiser la valeur métier délivrée par l’équipe en maintenant une charge de travail soutenable sur le long terme - Participer à la communauté des Scrum Master / Product Owner de la plateforme

EMBAUCHE EN CDI DIRECT CHEZ NOTRE CLIENT Missions du poste : · Réaliser des nouveaux projets concernant l’infrastructure · Prendre en charge le suivi opérationnel des projets et sujets transverses à l’équipe production · Assurer le maintien en condition opérationnelle de l’infrastructure · Contribuer à la résolution des incidents de niveau 2 et 3 avec l’aide de nos partenaires extérieurs · Participer à l’installation et le maintien en condition opérationnelle de l’infrastructure informatique au sens large en direct ou avec le soutien de nos partenaires spécialisés · Rédiger des notes techniques dans la base de connaissance · Contribuer à assurer la surveillance de l’infrastructure en environnement Microsoft · Apporter son expertise et son soutien opérationnel aux équipes Infrastructure et Support · Interface avec les équipes métiers de la DSI · Proposer de solutions d’optimisation des systèmes ou des plateformes

Notre client dans le secteur Industrie recherche un Chef de projet coordinateur MES H/F Descriptif de la mission: Dans le cadre d'un remplacement d'une ressource chez notre client dans le secteur industriel pharmaceutique. Nous recherchons un profil capable de faire l'interface sur des sujets très technique pour l'implémentation de leur produit MES. La mission : Coordonner et s'interfacer entre les équipes applicatives et la technique du produit MES Elaborer le Design et la supervision Planifier le services des fournisseurs MES sur tous les sujets très techniques (exemple : update et gestion des obsolescence) Résoudre les problèmes techniques (exemple : problème de sizing base de données) Etre capable de proposer une architecture produit et de pouvoir le mettre en exécution. S'assurer que la définition du design est bien exécuté

Nous recherchons un Administrateur système, réseaux et sécurité F/H pour notre client dans le secteur de l'assurance à Lyon. Missions principales : Construit, maintient et contrôle le respect des normes et des principes d'architecture logicielle et technique du SI, en concertation avec les autres équipes de la DSI, dont le RSSI pour la sécurité. Organise les choix de veille technologique, instruit et formalise les dossiers de choix et les présente lors du comité d’architecture. Participe aux comités techniques et au comité d’architecture, en tant que contributeur et conseil technique respectivement. Vérifie et analyse les impacts techniques des nouvelles solutions ou nouvelles versions d’icelles, et leur cohérence avec l'architecture existante et les règles de sécurité. Support de niveau 3 auprès de l’ensemble des équipes de la DSI sur les technologies homologuées. Fournit la documentation requise sur son périmètre et assure les transferts de compétences vis-à-vis des équipes ITOPS. Participe à la montée en compétence des équipes, et promeut auprès de ces équipes les principes d’architecture du SI. De manière exceptionnelle, contribue au maintien en conditions opérationnelle du SI en renfort temporaire de l’équipe d’exploitation ITOPS. Assure une veille sur les applications, le socle infrastructure et les progiciels retenus par l’entreprise. Préconise les montées de version nécessaires pour rester conforme à la politique de sécurité du SI, et les réalise sur son périmètre. Propose des améliorations destinées à conférer une plus grande autonomie pour l’équipe ITOPS, ainsi qu’une plus grande efficience. Contribue aux travaux de sécurisation du SI pilotés par le RSSI. Collabore avec, ou dans certains cas pilote, les prestataires qui sont susceptibles d’intervenir pour de l’expertise ou de l’assistance sur les opérations du pôle. Architecture Système, Réseaux et sécurité Définit et met en œuvre les évolutions nécessaires en termes de matériel et logiciel sur l’infrastructure (compute, storage, network) en tenant compte de l’existant, de l’exploitation, de la sécurité, et de l’optimisation des coûts. En lien avec l’architecte solution, définit l’infrastructure nécessaire et suffisante pour les applications (existantes ou nouvelles), en tenant compte de l’optimisation, des SLA, de l’exploitabilité et des impacts. Contrôle la conformité des équipements avec les référentiels

Activités au quotidien : • Référent support pour le NOC Insyncom • Maquettage des cas complexes rencontrées par les clients • Référent sur les différents outils support (gestion des tickets incidents, supervision, monitoring,…) • Relation éditeurs pour l’ouverture et le suivi des cases • Pilotage de la logistique RMA • Rédaction des documentations technique et procédures pour le support • Participation à certains projets d’intégration • Veille technologique sur les produits et solutions • Production des données à destination des reporting clients et Direction • Garant du passage en run des projets d’intégrations