Contexte Dans le cadre du renforcement d'une équipe Data agile, nous recherchons un Data Engineer / Développeur Big Data Senior pour intervenir sur une plateforme de données à fort volume. Vous participerez à la conception, au développement et à l'amélioration continue de solutions permettant de valoriser et exploiter des données en temps réel et en batch. Vos missions Développer et maintenir de nouvelles fonctionnalités au sein d'une équipe agile. Concevoir et faire évoluer les architectures de traitement de données. Participer aux choix techniques et accompagner les autres membres de l'équipe. Garantir la qualité, la performance et la maintenabilité du code. Mettre en place et améliorer les processus d'automatisation des tests. Contribuer à l'amélioration continue des pratiques de développement et d'exploitation Environnement technique Big Data : Spark (batch & streaming), Kafka Langages : Scala, Java API : Conception et développement d'API Data Platform : Hadoop, HDFS, Hive, HBase, Phoenix DevOps & CI/CD : GitLab CI/CD, Jenkins, Artifactory Qualité & Monitoring : SonarQube, ELK, Grafana Tests : JUnit, Xray, automatisation des tests Profil recherché Expérience solide en développement Big Data et architectures distribuées. Maîtrise de Spark, Kafka et de l'écosystème Hadoop. Bonne culture DevOps et intégration continue. Expérience des environnements Agile/Scrum. Esprit d'équipe, capacité à challenger les besoins et à être force de proposition. Sens de la qualité, de l'automatisation et de l'amélioration continue. Atouts Expérience sur des projets de traitement de données à forte volumétrie. Sensibilité aux problématiques de performance, scalabilité et fiabilité des plateformes Data. Mission idéale pour un profil souhaitant intervenir sur un environnement Big Data moderne, au sein d'une équipe agile mature et orientée qualité.
Client final : Secteur Industrie Type de contrat : Freelance / Indépendant uniquement Démarrage : Dès que possible – cette semaine Durée : Mission courte, haute intensité ("coup de poing") Budget : No limit / à négocier selon expertise (TJM ouvert) Contexte de la missionNotre client, acteur majeur du secteur industriel, doit impérativement migrer son cluster Azure HDInsight de la version 4.0 vers la version 5.1 d'ici le 31/08. Le cluster rencontre actuellement des problèmes de performance dégradée sur HBase, et le client recherche un expert capable d'intervenir en urgence pour : Identifier les causes racines de la dégradation de performance Auditer et optimiser la configuration du cluster HBase Sécuriser et accompagner la migration HDInsight 4.0 → 5.1 Résoudre les incidents bloquants
Contexte : Nous recherchons pour notre client un OPS SRE DATA /IA pour accompagner et capitaliser sur les produits en cours de mise en place sur son périmètre au sein de l'équipe « OPS DATA /IA. » MISSIONS : En charge de l'expertise technique des solutions Data et IA, vous aurez la responsabilité d'assurer la cohérence de l'intégration des produits dans le respect des règles de sécurité et de l'architecture du SI. Dans le cadre des équipes OPS DATA / IA , vous aurez un lien fonctionnel étroit avec les équipes métiers et les équipes de la filière TSI DATA et TSI IA. La mission d'expertise aura pour but d'assurer la cohérence des solutions dans l'environnement actuel et la transformation des solutions pour les maintenir up to date avec l'état de l'art du marché. Vous assurerez le support Niveau 2 du périmètre aux équipes de production. Responsabilités : Contribuerer au bon déroulement des différentes phases du projet, et dans ce cadre vous assurerez : - Contribuer aux projets informatiques sur les dimensions qui relèvent du champ d'expertise Data / IA. - Conseiller et assister dans le choix et la mise en œuvre des solutions retenues - Assurer l'exploitabilité dans le respect des règles de sécurité et d'architecture du SI - Garantir la pertinence et la pérennité des solutions techniques et/ou fonctionnelles dont vous aurez la charge afin de permettre l'évolution et le maintien en condition opérationnelle de la solution. - Garantir que les moyens de mesure de qualité de services sont opérationnels et disponibles (Quantification/Qualimétrie de fonctionnement)
🏢 Qui sommes-nous ? Visian Azur, filiale du Groupe Neurones, est une société de conseil spécialisée dans les projets data et applicatifs. Présents à Marseille, Aix-en-Provence, Sophia Antipolis, Montpellier, Toulouse et Lyon, nous accompagnons de grands comptes sur des projets techniquement exigeants. 💼 Le poste Vous rejoindrez le pôle Data de la Direction Technique d'un grand groupe français. Référent de l'exploitation de la plateforme Big Data, vous prendrez en charge son run en production et contribuerez à son évolution, au service des équipes projet et des utilisateurs. 🎯 Vos missions Maintenir la plateforme Datalake en conditions opérationnelles : traitement des incidents et des demandes des projets et des utilisateurs Participer à la mise en œuvre et à l'automatisation de nouvelles solutions Réaliser les mises en production Faire évoluer et améliorer les outils d'exploitation Informer et accompagner les utilisateurs de la plateforme Assurer le suivi de votre activité : bilan mensuel des tickets traités et point bimensuel sur l'avancement des projets 🛠️ Environnement technique Big Data : Hadoop, Spark, Kafka, Hive, HBase Conteneurisation : Docker, Kubernetes Automatisation et CI/CD : Ansible, Jenkins, GitHub Langages : Scala, Python Système : Unix / Linux
