Find your next tech and IT Job or contract Apache Kafka

NB : La maîtrise de Myrtea Metric est obligatoire et Golang constitue le langage principal utilisé sur les projets. Dans le cadre du renforcement d'une squad de développement chez un grand compte du secteur logistique, nous recherchons un Tech Lead Data / BAM pour intervenir sur des solutions de supervision métier et technique en temps réel. Vous aurez notamment pour missions de : piloter techniquement les développements de la squad participer à la conception et à l'évolution des architectures BAM développer et faire évoluer des applications principalement en Golang concevoir de nouveaux connecteurs de données mettre en place des indicateurs, règles métier et mécanismes d'alerte superviser des flux de données en temps réel accompagner les développeurs et réaliser les revues de code garantir la qualité, la performance et la maintenabilité des solutions contribuer aux tests techniques, à l'intégration, aux recettes et aux mises en production produire et maintenir la documentation technique Les projets concernent notamment la supervision des échanges de données, la détection d'anomalies, le suivi des traitements et le contrôle de la qualité des flux.

Missions : Développement des pipelines ETL des entités productrices IT locales : - accompagnement client pour la collecte des besoins - co-rédaction des spécifications fonctionnelles et techniques des sources de données à récupérer - ingestion et processing des sources de données IT primaires pour alimenter leur local data cleansing systems - push des données goldenisées vers le MDM IT Group - MCO et optimisation des pipelines - PV recette des pipelines Opérationnellement, les outils de travail : - PostGreSQL / Oracle ExaCC - Apache Kafka / PostgreSQL / S3 storage - Talend Real Time Big Data / ESB, ETL, EAI - Talend Data Catalogue - Grafana / Prometheus / Dynatrace - ServiceNow ITSM (change, incident, problem, request) - Jira / confluence Nice to have: - Tableau server / Tableau Desktop / PowerBI / Dataikku

Contexte de la mission Afin de soutenir la modernisation de ses infrastructures d'échange de données en temps réel, une entité spécialisée recherche un.e expert.e senior. La mission est centrée sur la conception, l'optimisation, la sécurisation et la gouvernance globale d'une architecture orientée événements reposant sur la solution Kafka Confluent, dans un objectif de haute disponibilité et de forte scalabilité. Objectifs et missions principales Les activités principales associées à ce poste s'articulent autour des axes suivants : Conception de l'architecture technique et déploiement des clusters Kafka Confluent. Gestion, administration avancée et maintien en conditions opérationnelles (MCO) de l'ensemble de la plateforme (topics, partitions, brokers). Implémentation et configuration des composants de l'écosystème (Schema Registry, Confluent Connect, ksqlDB). Définition et mise en œuvre des politiques de sécurité de la plateforme (RBAC, chiffrement TLS, authentification SASL/Kerberos, gestion des ACLs). Optimisation des performances (tuning des producteurs/consommateurs, gestion de la rétention, stratégies de re-balancing) et résolution des incidents complexes. Accompagnement technique des équipes de développement pour l'intégration des flux de streaming de données. Livrables attendus Les livrables à fournir au cours de la mission comprennent : les dossiers d'architecture technique (DAT) et les guides de préconisations pour les infrastructures de streaming. les scripts d'automatisation des configurations et des déploiements (Infrastructure as Code). les matrices de sécurité, politiques de gouvernance des schémas et configurations d'accès. les plans de secours, procédures opérationnelles d'exploitation et de gestion des sauvegardes/restaurations. les tableaux de bord de supervision et rapports de métriques de performance.

Plateforme On-Premise & Cloud Synthèse de la Mission : Rôle : Ingénieur Data Senior (> 7 ans d'expérience) Localisation : Paris ou Rennes (3 jours/semaine sur site, 2 jours en télétravail) TJM Max : 770 € / jour Date de démarrage : ASAP Durée : 5 à 6 mois (jusqu'au 27/11/2026) Contexte & Objectif de la Mission : Au sein d'un grand groupe média, l'objectif principal est de concevoir et construire le MVP d'une plateforme Data On-Premise basée sur des technologies Open Source. La plateforme permettra de : Gérer les transformations de données On-Premise et alimenter un Data Lake local. Servir de plateforme d'ingestion pour le Big Data sur GCP (Cloud Public). Faciliter la transition du mode Batch vers le Streaming (Temps réel). Valider la faisabilité de migration de flux ETL legacy (OpenText / Genio). Responsabilités & Missions Principales : Conception & Déploiement du MVP : Architecturer et intégrer la plateforme sur un socle existant (Kubernetes, GitLab CI, Prometheus/OpenTelemetry). Installer et configurer la stack Open Source : Kafka, NiFi, Spark, Iceberg, Trino. Validation Technique & Cas d'Usage : Migrer quelques flux ETL clés pour valider la valeur de la plateforme. Déployer des pipelines streaming (Kafka + Spark Structured Streaming). Mettre en place l'alimentation du Data Lake (Iceberg + Trino) et assurer l'interopérabilité avec GCP. Collaboration & Documentation : Travailler en synergie avec les équipes Data/IA et DevOps/Infra. Documenter l'architecture, les choix techniques et transmettre les compétences aux équipes internes.

La mission consiste à : Gestion des évolutions Déploiement et validation des changements applicatifs, d'infrastructure et de sécurité sur les environnements de test (Staging/UAT) puis en production. Automatisation & outillage Conception des scripts et des solutions d'automatisation des interventions récurrentes. Mise en place des outils facilitant le support et l'évolution de l'application. Monitoring Mettre en place ou améliorer le monitoring applicatif sous Dynatrace (définition de métriques, alertes, dashboards). Documentation Rédaction et maintenance de la documentation fonctionnelle et technique (procédures d'exploitation, run-books, guides d'incident). Support technique Assurer le support quotidien au sein d'une organisation répartie sur Mumbai, Paris, portugal & UK. Gestion des incidents (Service Mgt - ITIL) Élaboration, suivie et mise en œuvre des plans d'action préventifs pour éviter la réapparition des dysfonctionnements. Communiquer quotidiennement sur l'état de la production applicative. Opérations exceptionnelles Intervention lors des tests de reprise (DRP/PRA), des mises en production majeures et des migrations d'infrastructure planifiées le week-end. Points forts à mettre en avant dans la réponse : Communication et Service management (Incident, problèmes et changements) + Jira pour les actions de support de production. Notions du chainage CI/CD via un pipeline DevOps complet. Notions en Python et scripting Bash Notions sql et BD Experience dans un envirobnnement big data Approche orientée automatisation visant à réduire les interventions manuelles et à optimiser le coût de support.

L'équipe développe et maintient des microservices critiques à fort trafic sur une architecture événementielle (Kafka) et conteneurisée (Kubernetes). Environnement technique mature, cadence agile, stack moderne. .NET Core — niveau Senior (5 ans min. en environnement de production) MongoDB + SQL Server — manipulation et modélisation de données hybrides Apache Kafka — conception et consommation de topics en production Kubernetes — déploiement et opération de conteneurs en production Mobilité Bordeaux — présence sur site 3 j/sem impérative

Dans le cadre d'un besoin client, nous recherchons un Ingénieur DevOps / Infrastructure PKI Senior pour intervenir sur des produits à forte activité RUN, notamment autour de la solution iSecu, des infrastructures PKI et des matériels HSM. Contexte de la missionLe consultant interviendra au sein du département Chaîne Communicante, dans une petite équipe agile de 4 personnes intégrée au train CCMA. L'environnement est critique, avec de forts enjeux de disponibilité, de sécurité, de performance et d'évolution des plateformes. Missions principalesLe consultant aura pour responsabilités : Maintenir en condition opérationnelle les plateformes existantes. Contribuer à l'évolution et à la modernisation des stacks techniques. Automatiser les déploiements et les opérations. Optimiser les performances des infrastructures. Gérer les environnements PKI et les matériels HSM. Participer aux activités BUILD et RUN. Contribuer aux chantiers d'amélioration continue. Piloter des sujets d'évolution d'infrastructure en autonomie. Compétences attenduesCompétences indispensables : Expertise confirmée en PKI / HSM. Très bonne maîtrise des environnements Linux. Expérience sur des infrastructures critiques ou à haute disponibilité. Capacité à intervenir de manière autonome sur des sujets techniques complexes. Compétences techniques appréciées : OpenStack Terraform Ansible Jenkins Kafka PostgreSQL MongoDB

Contexte de la mission Dans le cadre d'un programme de transformation digitale d'envergure, vous rejoindrez une équipe agile dédiée au développement d'une plateforme de données temps réel. Cette plateforme permet de centraliser, traiter et valoriser des données clients afin de proposer de nouveaux services digitaux et d'accompagner la modernisation du système d'information. Vous évoluerez au sein d'un environnement collaboratif, orienté qualité de code, amélioration continue et excellence technique. Vos missions Développer et mettre en œuvre de nouvelles fonctionnalités à partir des besoins métiers priorisés Concevoir des solutions techniques robustes et évolutives. Participer aux choix d'architecture et aux orientations techniques de l'équipe. Concevoir et développer des API. Automatiser les tests et promouvoir les bonnes pratiques de développement. Garantir la qualité, la performance et la maintenabilité des applications. Assurer le bon fonctionnement des solutions en production. Accompagner les membres de l'équipe dans une démarche d'amélioration continue. Environnement technique Langages & Frameworks Java Scala Apache Spark (Streaming & Batch) Apache Kafka Data & Big Data Hadoop / Cloudera HDFS Hive HBase Phoenix API & Intégration Développement d'API DevOps & Qualité GitLab CI/CD Jenkins Artifactory SonarQube ELK Grafana XRAY JUnit Automatisation des tests / Craftsmanship Méthodologie Agile Scrum

Dans le cadre du renforcement d'une équipe de développement composée d'une douzaine de collaborateurs, nous recherchons un Développeur Java Spring Boot pour intervenir sur la conception, le développement et l'évolution d'API métier. Le consultant participera aux phases de conception, développement, intégration et maintenance des services exposés par la plateforme. Il contribuera également au traitement des incidents, aux analyses demandées par les utilisateurs et à l'évolution des récits dans Jira. Une attention particulière sera portée à la sécurité applicative, à la qualité du code et au respect des bonnes pratiques de développement. Le poste nécessite une bonne compréhension des problématiques API, des architectures modernes et des enjeux de sécurisation des applications. Compétences techniques attenduesDéveloppementJava Spring Boot API REST Easy Rest Postman OutilsGitLab Jira ServiceNow SonarQube API ManagementAPI Manager Base de donnéesMySQL Sécurité ApplicativeOWASP Top 10 CVE / CWE XSS Injections SQL / HTML / CSS / Code CSRF HTTPS / TLS Authentification et contrôle d'accès Validation des entrées / sorties Gestion des erreurs Contrôle d'intégrité des applications Outils de sécuritéSonarQube Checkmarx JFrog Xray OWASP Dependency Check

Nous recherchons un Ingénieur DevOps & Backend Java pour rejoindre une équipe en charge du développement d'une plateforme temps réel à forte volumétrie (+300 messages/seconde), construite sur GCP, Kubernetes, Kafka et une architecture microservices Java. Vos missions : Infrastructure & Platform Engineering (50%) Concevoir et administrer des clusters Google Kubernetes Engine (GKE) Exploiter et optimiser une plateforme Apache Kafka Déployer l'Infrastructure as Code avec Terraform, Helm et Ansible Mettre en place l'observabilité (monitoring, métriques, alerting) Gérer la sécurité de la plateforme (Workload Identity, Network Policies, gestion des secrets) Concevoir et optimiser les pipelines CI/CD Développement Backend (30%) Développer des microservices performants en Java / Spring Boot Optimiser les traitements de flux Kafka Participation ponctuelle sur Angular si nécessaire Études techniques (20%) Réaliser des benchmarks de performance (k6, tests de charge) Effectuer des études de capacité (capacity planning) Produire la documentation d'architecture (ADR)

Je recherche un Ingénieur Intégration Senior, spécialisé Apache Camel ayant plus de 1à ans d' experience Périmètre de la mission Migration de flux TIBCO vers Apache Camel : analyse des routes existantes, réécriture et qualification Développement et maintenance de routes Apache Camel complexes en Java DSL et YAML DSL : routage dynamique, CBR (Content-Based Router), EIP (Enterprise Integration Patterns), gestion des erreurs (Dead Letter Channel, Retry, Circuit Breaker) Conception de Kamelets réutilisables et mise en œuvre de catalogues de composants d'intégration partagés Mise en œuvre de pipelines d'orchestration multi-étapes avec gestion des transactions distribuées et mécanismes de retour arrière (rollback) Intégration de mécanismes d'idempotence (pattern Idempotent Consumer) pour garantir une livraison unique (« exactly-once ») des flux critiques Mise en œuvre de transformations complexes : XSLT avancé, JSONata, templates Velocity, marshalling/unmarshalling (JAXB, Jackson) Développement et maintenance de services backend Spring Boot exposant des API REST Intégration avec des systèmes de messagerie et des architectures événementielles (Kafka, IBM MQ) Mise en œuvre de patterns de résilience : split/aggregate, throttling, backpressure, routage asynchrone Déploiement et exploitation sur infrastructure cloud-native en appliquant les principes d'Infrastructure as Code : définition, versionnage et déploiement de l'infrastructure via Terraform, Helm et GitOps (ArgoCD ou Flux) Contribution aux pipelines CI/CD GitLab et aux déploiements multi-environnements Mise en place et maintenance de tests d'intégration (CamelTestSupport, TestContainers) Participation aux activités d'observabilité : métriques Camel (Micrometer), supervision des routes Compétences requises Apache Camel (Java DSL, YAML DSL, EIP, Kamelets, gestion avancée des erreurs) – Niveau expert, plus de 5 ans d'expérience avec Apache Camel Migration depuis TIBCO (BusinessWorks, EMS ou équivalent) Spring Boot 3.x Java 17 / 21Cloud-native : conteneurs, déploiement et exploitation Infrastructure as Code : Terraform, Ansible ou équivalent GitOps (ArgoCD, Flux ou équivalent) Kafka et architectures événementielles XML, XSD, XSLT avancé, transformation et validation de messages Patterns EIP : CBR, Aggregator, Splitter, Idempotent Consumer, Dead Letter Channel Tests d'intégration Camel (CamelTestSupport, TestContainers) Observabilité : Surveillance des routes Camel (via OpenTelemetry, Micrometer) Oracle (SQL, schémas, transactions) Maven Multi-Modules GitLab CI/CD Anglais obligatoire Compétences appréciées Expérience approfondie de la migration de TIBCO vers Apache Camel Expérience avancée en IaC (Infrastructure as Code) : gestion du déploiement de pipelines, versionnage de l'infrastructure, détection de dérive (drift detection) Connaissance des normes ISO 20022 Expérience dans des environnements critiques ou réglementés (banque, assurance) IBM MQ ou middleware équivalent CFT Groovy / JSONata (transformations Camel avancées) Hawtio / Kaoto (surveillance et conception de routes Camel) Expérience Minimum 10 ans d'expérience globale en intégration, middleware ou développement backend Au moins 4 ans d'expérience avec Apache Camel, avec une expertise avérée dans les modèles d'intégration d'entreprise (EIP), la conception de routes complexes et la gestion de gros volumes Expérience avérée sur des projets de migration depuis TIBCO (BusinessWorks, EMS, ActiveMatrix...) vers des solutions modernes Solide expérience avec Spring Boot et l'écosystème Java Expérience confirmée dans des environnements cloud-native : déploiement et exploitation, CI/CD, Infrastructure as Code (Terraform, Helm, GitOps) – capacité à définir, versionner et déployer des infrastructures applicatives comme du code Bonne compréhension des architectures distribuées, des architectures événementielles (EDA) et des modèles de résilience Habitude de travailler sur des systèmes critiques à fort volume Capacité à analyser, comprendre et migrer des flux TIBCO existants vers Apache Camel Autonomie dans l'analyse fonctionnelle et technique d'une architecture existante Sensibilité aux enjeux de performance, fiabilité, traçabilité, idempotence et résilience Aisance dans les environnements Agile et les équipes pluridisciplinaires Transversal : Connectivité : assurer l'interopérabilité entre différents protocoles (HTTP, JMS, CFT...) et sécuriser les communications (TLS, mTLS, OAuth2, JWT) Performance : mesurer et optimiser la latence, le débit et la consommation mémoire des routes Camel, piloter des tests de charge (JMeter, Gatling) et affiner le tuning JVM/GC pour des volumes critiques Fiabilité : mettre en œuvre des stratégies avancées de nouvelle tentative (retry), de disjoncteur (circuit breaker), de repli (fallback) et de gestion des messages en échec (dead letter), définir et surveiller les SLO/SLA (temps de réponse, taux d'erreur) Observabilité : enrichissement via Micrometer • Métriques, traçage des flux avec OpenTelemetry, configuration de tableaux de bord (Grafana, Prometheus) et d'alertes ; utilisation de Hawtio/Kaoto pour la surveillance en temps réel. Scalabilité : conception de routes et de services sans état (*stateless*), exploitation de l'autoscaling Kubernetes, gestion de la contre-pression (*backpressure*) et du bridage (*throttling*) pour prévenir la saturation. Déploiement et exploitation sur une infrastructure cloud-native en appliquant les principes de l'Infrastructure as Code : définition, versionnage et déploiement de l'infrastructure via Terraform, Helm et GitOps (Argo CD ou Flux). Date de démarrage 1er septembre

La mission consiste à : - Exposer les données utiles à l'entreprise pour les analyser et les utiliser afin d'améliorer l'expérience utilisateur et la productivité - Transformer des données issues du DataLake afin de les normaliser - Modéliser la sphère de données - Développer les flux - Exposer des données brutes et/ou agrégées au bon niveau de granularité aux différents métiers de l'entreprise - Travailler en lien avec des Data Scientists sur les données qu'il aura exposées - Mettre en place des rapports de Dataviz - Mission basée en métropole lilloise avec présence sur site 3j/semaine obligatoire Compétences demandées : - Formation supérieure en école d'ingénieur, école d'informatique ou Master spécialisé dans la Data Science - Première expérience en Data Engineering indispensable - Snowflake, GCP, BigQuery, DBT, SQL, Semarchy, Airflow, Python ... - Excellents savoir-être : rigueur, esprit analytique et de synthèse, communication... - Méthode Agile - Anglais

Monitoring et Observabilité : • Mise en place de solutions de monitoring (Datadog) • Surveillance de l'état de santé du périmètre SIRH, KPI Intégration et API : • Utilisation d'API REST / SOAP. • Utilisation de Oracle Integration Cloud (OIC) pour l'échange de données et l'automatisation de processus. • Evolution vers une Architecture orientée événements (EDA) : publication dans des topics Kafka. Automatisation et Ordonnancement : • Planification et gestion de jobs d'ordonnancement dans BMC Software Control-M. • Analyse et résolution en cas de dysfonctionnement • Automatisation de tâches diverses, notamment les tests et les flux de données Rédaction de Scripts : • Création et maintenance de scripts en cmd, PowerShell, Python. • Automatisation de tâches répétitives via ces scripts

Nous recherchons un(e) Ingénieur(e) DevOps à double casquette Data Engineer. Volet Data Engineering : maîtrise du développement de de l'analyse de données. Développement de traitement d'intégration , transformation et exposition de données Volet DevOps : Automatiser, déployer et maintenir nos infrastructures. Afin de garantir la scalabilité, la sécurité et la haute disponibilité de nos environnements. Attentes : Une expérience solide de 5 ans minimum Data & Développement : Maîtrise de Python et forte appétence pour l'analyse de données. La maîtrise de Git est indispensable. Culture Ops & Automatisation : Excellente maîtrise des outils d'Infrastructure as Code (Terraform) et de gestion de configuration (Ansible). Les "Plus" qui feront la différence : Une expertise sur Google Cloud BigQuery ou l'ETL Informatica. Une solide culture de l'écosystème Linux (RedHat / Debian). Stack Technique Cloud Provider : Google Cloud Platform (GCP) Data & Stockage : GCP BigQuery, Kafka, SQL Outils DevOps : Terraform, Ansible, Git, Cloud Run, Redhat/Debian Développement : Python/Vuejs/Shell/Informatica