Trouvez votre prochaine offre d’emploi ou de mission freelance AWS OpenSearch

1. ContexteDans le cadre d'un projet de replatforming de la stack ELK vers OpenSearch, une migration de la plateforme actuelle est en cours, incluant un passage d'une architecture single-tier vers une architecture multi-tier. Cette évolution repose notamment sur la mise en place d'une infrastructure OpenSearch dimensionnée, l'adaptation de la chaîne d'ingestion Kafka/Logstash, la migration des composants existants (index, mappings, templates, dashboards) et l'automatisation des déploiements via Ansible/AWX. Un renfort expert est recherché pour accompagner la mise en œuvre et l'optimisation de cette architecture, avec une attention particulière sur Kafka (administration, optimisation, évolutions). 2. MissionLa société devra fournir les prestations suivantes : Auditer l'architecture existante. Analyser les choix techniques mis en œuvre et identifier les axes d'amélioration. Apporter une expertise sur l'optimisation de la plateforme OpenSearch (performance, résilience, maintenabilité). Apporter une expertise sur les environnements Kafka (administration des clusters, optimisation des flux, gestion des performances, accompagnement des évolutions). Apporter une expertise Logstash compatible OpenSearch (pipelines, parsing, optimisation). Contribuer à la migration ELK vers OpenSearch (index, mappings, pipelines). Industrialiser les déploiements via Ansible / AWX. Documenter et accompagner les équipes.

Contexte : Dans le cadre d'un projet de replatforming de la stack ELK vers OpenSearch, une migration de la plateforme actuelle est en cours, incluant un passage d'une architecture single-tier vers une architecture multi-tier. Cette évolution repose notamment sur : - La mise en place d'une infrastructure OpenSearch, dimensionnée pour supporter la volumétrie actuelle et les besoins futurs, - L'adaptation de la chaîne d'ingestion basée sur Kafka et Logstash, - La migration des composants existants (index, mappings, templates et dashboards) vers OpenSearch, - L'automatisation et l'industrialisation des déploiements via Ansible / AWX. Dans ce contexte, nous recherchons un renfort d'un expert OpenSearch/Kafka pour accompagner la mise en œuvre, l'optimisation de cette architecture, et disposant d'un retour d'expérience concret sur ce type de transformation. Une attention particulière est attendue sur Kafka, afin d'accompagner son administration, son optimisation et ses évolutions. MISSIONS : - Audit de l'architecture existante. - Analyse des choix techniques mis en œuvre et identification des axes d'amélioration. - Apport d'expertise sur l'optimisation de la plateforme OpenSearch (performance, résilience, maintenabilité). - Expertise sur les environnements Kafka (administration des clusters, optimisation des flux, gestion des performances et accompagnement des évolutions) - Expertise Logstash (compatible OpenSearch) (pipelines, parsing, optimisation) - Contribution à la migration ELK vers OpenSearch (index, mappings, pipelines). - Industrialisation via Ansible / AWX. - Documentation et accompagnement des équipes.

Contexte de la mission Dans le cadre d'un projet de replatforming ELK vers OpenSearch, la plateforme actuelle est en cours de migration avec un passage d'une architecture single-tier vers une architecture multi-tier. Missions Auditer l'architecture existante et analyser les choix techniques. Identifier les axes d'amélioration et formuler des recommandations concrètes. Optimiser la plateforme OpenSearch : performance, résilience, disponibilité et maintenabilité. Intervenir sur Kafka : administration des clusters, optimisation des flux, performances et évolutions d'architecture. Intervenir sur Logstash compatible OpenSearch : conception, parsing et optimisation des pipelines. Participer à la migration ELK → OpenSearch : index, mappings et pipelines. Industrialiser les déploiements avec Ansible / AWX. Produire la documentation et accompagner les équipes techniques.

Contexte de la missionDans le cadre d'un programme stratégique de modernisation de sa plateforme de collecte et d'analyse de logs, notre client mène actuellement un projet de migration de sa stack ELK vers OpenSearch. Cette transformation s'accompagne d'une évolution majeure de l'architecture existante avec le passage d'un modèle single-tier vers une architecture multi-tier plus résiliente, évolutive et performante. Le projet comprend notamment : Le déploiement et le dimensionnement d'une nouvelle plateforme OpenSearch adaptée aux besoins actuels et futurs. L'évolution de la chaîne d'ingestion basée sur Kafka et Logstash. La migration des composants existants (index, mappings, templates, dashboards) vers OpenSearch. L'automatisation et l'industrialisation des déploiements via Ansible et AWX. L'amélioration continue des performances, de la disponibilité et de la maintenabilité de l'ensemble de la plateforme. Afin d'accompagner cette transformation, nous recherchons un Expert OpenSearch / Kafka capable d'apporter une expertise technique forte ainsi qu'un retour d'expérience concret dans le cadre de projets similaires. MissionsAu sein des équipes techniques, vous interviendrez sur l'ensemble du projet de migration et d'optimisation de la plateforme. Vos principales responsabilitésRéaliser l'audit de l'architecture existante. Analyser les choix techniques actuels et formuler des recommandations d'amélioration. Concevoir et optimiser l'architecture OpenSearch. Garantir les performances, la résilience et la scalabilité de la plateforme. Participer à la migration de l'écosystème ELK vers OpenSearch. Accompagner les équipes dans la transformation de l'architecture et des usages. Expertise OpenSearchAdministration et exploitation de clusters OpenSearch. Optimisation des performances et du dimensionnement. Gestion des index, mappings, templates et politiques de rétention. Contribution à l'architecture cible multi-tier. Résolution des problématiques de performance et de disponibilité. Expertise KafkaAdministration et exploitation de clusters Kafka. Optimisation des flux et des performances. Gestion de la capacité et de la montée en charge. Accompagnement des évolutions d'architecture. Analyse et résolution des incidents complexes. Expertise LogstashConception et maintien des pipelines d'ingestion. Optimisation des traitements et du parsing. Adaptation des pipelines dans un contexte OpenSearch. Amélioration des performances et de la robustesse des flux. Industrialisation et accompagnementAutomatisation des déploiements via Ansible et AWX. Mise en place de bonnes pratiques d'exploitation. Rédaction de documentation technique. Transfert de compétences et accompagnement des équipes internes.

Vos missions seront: - Audit de l'architecture existante et analyse des choix techniques. - Optimisation de la plateforme OpenSearch (performance, résilience, maintenabilité). - Expertise Kafka : administration, optimisation des flux, gestion des performances. - Expertise Logstash (compatible OpenSearch) : pipelines, parsing, optimisation. - Migration ELK / OpenSearch (index, mappings, pipelines). - Industrialisation via Ansible/AWX. (Automatisation, Déploiement, Configuration, industrialisation) - Documentation et accompagnement des équipes.

Dans le cadre d'un programme de modernisation des plateformes d'observabilité et de traitement des données, nous recherchons un Expert OpenSearch / Kafka pour accompagner la transformation d'une architecture existante vers une nouvelle plateforme plus performante, résiliente et évolutive. Cette mission s'inscrit dans un projet de migration d'un environnement ELK vers OpenSearch, avec une évolution d'une architecture mono-tier vers une architecture multi-tier. L'objectif est d'optimiser les performances, la scalabilité et l'industrialisation des déploiements tout en garantissant la continuité des services. Réaliser l'audit de l'architecture existante et identifier les axes d'amélioration. Apporter une expertise sur la conception, l'optimisation et l'exploitation d'une plateforme OpenSearch. Accompagner l'administration et l'évolution des clusters Kafka. Optimiser les flux de données et les performances des plateformes. Concevoir et améliorer les pipelines Logstash compatibles OpenSearch. Participer à la migration des index, mappings, templates et pipelines vers OpenSearch. Industrialiser les déploiements et les opérations via Ansible / AWX. Rédiger la documentation technique et accompagner les équipes dans la montée en compétences. Formuler des recommandations techniques pragmatiques et adaptées aux enjeux du projet.

Rejoignez une mission ambitieuse de replatforming d'une stack ELK vers OpenSearch, incluant une migration vers une architecture multi-tier. Vous serez responsable de la mise en place et de l'optimisation d'une infrastructure OpenSearch dimensionnée pour répondre aux besoins actuels et futurs. Votre rôle inclura l'adaptation de la chaîne d'ingestion basée sur Kafka et Logstash, la migration des composants existants (index, mappings, templates, dashboards), ainsi que l'automatisation des déploiements via Ansible et AWX. Une expertise pointue sur Kafka sera essentielle pour accompagner son administration, son optimisation et ses évolutions.

Dans le cadre d'un projet de replatforming de la stack ELK vers OpenSearch, une migration de la plateforme actuelle est en cours, incluant un passage d'une architecture single-tier vers une architecture multi-tier. Cette évolution repose notamment sur : • La mise en place d'une infrastructure OpenSearch, dimensionnée pour supporter la volumétrie actuelle et les besoins futurs • L'adaptation de la chaîne d'ingestion basée sur Kafka et Logstash • La migration des composants existants (index, mappings, templates et dashboards) vers OpenSearch • L'automatisation et l'industrialisation des déploiements via Ansible / AWX Dans ce contexte, un renfort expert est recherché pour accompagner la mise en œuvre et l'optimisation de cette architecture, disposant d'un retour d'expérience concret sur ce type de transformation. Une attention particulière est attendue sur Kafka, afin d'accompagner son administration, son optimisation et ses évolutions. • Audit de l'architecture existante • Analyse des choix techniques mis en œuvre et identification des axes d'amélioration • Apport d'expertise sur l'optimisation de la plateforme OpenSearch (performance, résilience, maintenabilité) • Expertise sur les environnements Kafka (administration des clusters, optimisation des flux, gestion des performances et accompagnement des évolutions) • Expertise Logstash compatible OpenSearch (pipelines, parsing, optimisation) • Contribution à la migration ELK vers OpenSearch (index, mappings, pipelines) • Industrialisation via Ansible / AWX • Documentation et accompagnement des équipes

Audit de l'architecture existante et analyse des choix techniques. Optimisation de la plateforme OpenSearch (performance, résilience, maintenabilité). Expertise Kafka : administration, optimisation des flux, gestion des performances. Expertise Logstash (compatible OpenSearch) : pipelines, parsing, optimisation. Migration ELK → OpenSearch (index, mappings, pipelines). Industrialisation via Ansible/AWX. Documentation et accompagnement des équipes.