Find your next tech and IT Job or contract Apache Kafka

Notre client, un organisme de protection sociale (retraite complémentaire), construit son socle Kafka d'entreprise sur la distribution Confluent. Ce socle portera les échanges, la réplication et l'intégration de données de tout le SI. Il doit aussi remplacer progressivement IBM CDC, les extractions batch et le socle WebMethods. Vous rejoignez l'équipe projet pour concevoir, construire et industrialiser ce socle. La mission est basée à Gradignan, près de Bordeaux. Un profil basé à Paris ou à Lyon est envisageable s'il est très autonome et peut se déplacer régulièrement sur site. MissionsConcevoir l'architecture Kafka / Confluent et la faire évoluer d'un socle pilote vers une plateforme cible capacitive et multi-cas d'usage Installer, configurer et administrer les clusters Kafka : brokers en mode KRaft, Schema Registry, workers Kafka Connect, sur RedHat et Kubernetes (Confluent / Strimzi) Mettre en œuvre et industrialiser les connecteurs Kafka Connect : JDBC, Debezium PostgreSQL, HDFS, Datastage, Teradata. Cela couvre la déclaration des producteurs et consommateurs, la gestion des configurations et des souscriptions, l'initialisation des données et l'évolution des schémas Remplacer les flux CDC et batch existants par des flux temps réel, et mettre en place la réplication PostgreSQL via Kafka Sécuriser les échanges et intégrer la gestion des habilitations à l'écosystème SI existant Tuner et optimiser les performances de la plateforme Automatiser le déploiement et les opérations récurrentes avec Ansible, Shell, Python et des pipelines CI/CD Mettre en place l'exploitation du socle : supervision Prometheus / Grafana, tableaux de bord, procédures d'arrêt et de relance, traitement des incidents, demandes et changements Rédiger les dossiers d'architecture, d'administration et d'exploitation, ainsi que les normes et bonnes pratiques Former les équipes et assurer le transfert de compétences

Contexte : Dans le cadre du développement et de l'évolution de la Group Data Platform, nous recherchons un Tech Lead Data Engineering spécialisé dans les architectures temps réel, disposant d'au moins 10 ans d'expérience. Le consultant interviendra au sein de l'équipe Group Data Delivery afin de concevoir, développer et opérer des produits de données temps réel, depuis l'ingestion et le traitement des flux jusqu'à leur exposition via des API à destination de consommateurs internes et externes. Il devra apporter une expertise technique avancée sur Apache Flink, Apache Kafka, les architectures événementielles, les microservices et les technologies AWS, tout en assurant le leadership technique, la qualité des développements et la fiabilité des solutions mises en production. Missions principales Concevoir et développer des produits de données temps réel de bout en bout à l'aide d'Apache Flink, Apache Kafka et des architectures événementielles. Construire et maintenir des pipelines de données résilients pour l'ingestion, le traitement, la transformation et la distribution des données en temps réel et en batch. Concevoir et développer des API REST, des interfaces OpenAPI, des microservices et des interfaces de streaming. Déployer et exploiter des solutions sur AWS, notamment avec MSK, Kinesis, Managed Service for Apache Flink, Lambda, API Gateway, ECS, EKS, S3 et IAM. Mettre en place des contrôles de qualité des données, des modèles de données, des mécanismes de validation et une gouvernance des schémas. Définir et industrialiser les pipelines CI/CD avec GitLab CI, GitHub Actions ou des outils équivalents. Garantir l'observabilité des solutions grâce à CloudWatch, OpenTelemetry, Prometheus, Grafana, aux logs structurés, aux métriques et au tracing. Assurer le maintien en conditions opérationnelles des services : supervision, gestion des incidents, analyse des causes racines et optimisation des performances. Veiller au respect des SLA et à la disponibilité, la sécurité et la fiabilité des services en production. Appliquer les bonnes pratiques de sécurité : OAuth2/OIDC, chiffrement des données, gestion des secrets, contrôle réseau et principe du moindre privilège. Rédiger la documentation technique : dossiers d'architecture, spécifications API, procédures d'exploitation et documentation de déploiement. Piloter les choix techniques, animer les échanges d'architecture et réaliser les revues de code et de conception. Définir et promouvoir les standards d'ingénierie, accompagner les développeurs moins expérimentés et assurer le transfert de connaissances. Garantir la livraison de produits de données robustes, évolutifs, sécurisés et prêts pour la production. Expertise technique : Apache Flink et PyFlink. Apache Kafka et Amazon MSK. Architectures événementielles (Event-Driven Architecture). Data Engineering et systèmes temps réel. Architecture microservices. Conception et développement d'API REST et OpenAPI. Java, Python, Scala et SQL. Modélisation des données et gestion des schémas (Avro, Schema Registry). Amazon Web Services (AWS) : Lambda, Kinesis, Managed Flink, ECS, EKS, S3, API Gateway et IAM. DevOps, qualité et exploitation : Mise en place de pipelines CI/CD (GitLab CI, GitHub Actions). Tests automatisés et contrôle de la qualité des développements. Observabilité : CloudWatch, OpenTelemetry, Prometheus et Grafana. Gestion des SLA et support de production. Sécurisation des applications et des flux de données : OAuth2/OIDC, chiffrement et gestion des accès selon le principe du moindre privilège. Leadership et compétences transverses : Leadership technique et conception d'architectures. Revues de code et définition des standards d'ingénierie. Capacité à résoudre des problématiques techniques complexes. Mentorat et accompagnement des équipes. Communication avec les parties prenantes techniques et métiers. Excellente maîtrise de l'anglais, niveau bilingue.

Notre client dans le secteur Transport et logistique recherche un/une Run Owner H/F Description de la mission : Le client recherche un Run Owner qui sera responsable du Business Activity Monitoring (BAM), c'est-à-dire de la supervision des processus métier en production. Il vérifiera que les activités métier se déroulent correctement : traitement des commandes, paiements, échanges de messages ou mise à jour des dossiers. Il s'appuiera sur Dynatrace SaaS et Kafka pour détecter les anomalies et suivre les indicateurs métier. Les missions : Assurer le Business Activity Monitoring (BAM) et la supervision des processus métier. Définir et suivre les indicateurs métier : volumes, délais, statuts, rejets ou traitements bloqués. Superviser les flux applicatifs et les événements transitant par Kafka. Utiliser Dynatrace SaaS pour analyser les alertes, parcours et anomalies. Identifier les écarts entre le fonctionnement technique et le résultat attendu côté métier. Coordonner les équipes techniques et fonctionnelles en cas d'incident. Piloter les incidents jusqu'à leur résolution et suivre les actions correctives. Contribuer à la création des dashboards, alertes et règles de supervision BAM. Produire des reportings sur la qualité et la performance des processus métier. Le profil rechercher est confirmé à senior, avec une expérience en Run et surtout en BAM de production applicative, supervision ou exploitation. Une bonne compréhension des processus métier est indispensable. Le consultant doit connaître les principes d'observabilité avec Dynatrace et comprendre les flux Kafka : topics, messages, producteurs, consommateurs et retards de consommation. Compétences / Qualités indispensables : dynatrace, kafka, business activity monitoring Informations concernant le télétravail : Libre

Contexte : Dans le cadre du développement de sa plateforme de données groupe, notre client recherche un Senior Data Engineer expérimenté pour rejoindre une équipe en charge de la conception et de la mise en œuvre de produits de données temps réel à forte valeur ajoutée. Vous interviendrez sur des architectures modernes orientées événements et participerez à la construction de solutions robustes, scalables et industrialisées permettant l'exploitation de données en temps réel à l'échelle du groupe. Vous serez également un référent technique auprès de l'équipe et contribuerez à la définition des bonnes pratiques de développement et d'exploitation. Vos missions : Concevoir et développer des pipelines de données temps réel basés sur Apache Kafka et Apache Flink Mettre en place des architectures orientées événements (Event-Driven Architecture) Développer et maintenir des APIs REST et microservices à destination des consommateurs de données Concevoir des pipelines d'ingestion, de transformation et de diffusion de données en streaming et batch Garantir la qualité, la fiabilité et la gouvernance des données Mettre en œuvre les bonnes pratiques CI/CD et DevOps Assurer le monitoring, l'observabilité et le support en production Participer aux choix d'architecture et aux revues de code Encadrer techniquement les membres moins expérimentés de l'équipe Produire la documentation technique et les procédures d'exploitation Environnement technique : Data & StreamingApache Kafka Apache Flink Event-Driven Architecture Data Modeling API Design OpenAPI Cloud AWSAmazon MSK Kinesis Amazon Managed Service for Apache Flink AWS Lambda API Gateway ECS / EKS Amazon S3 IAM DevOps & ObservabilitéGitLab CI / GitHub Actions CloudWatch OpenTelemetry Prometheus Grafana SécuritéOAuth2 OpenID Connect (OIDC) Secrets Management Encryption IAM & Least Privilege

VOTRE RÔLE Tech Lead à mi-temps encadrement, mi-temps développement. Vous prenez en charge les développements les plus complexes (pas forcément les plus volumineux ni les plus longs) et vous préparez le travail des équipes de développement en Inde : cadrage, conception, consignes claires, puis suivi et contrôle de la réalisation. VOS MISSIONS • Encadrer l'équipe offshore : suivre au quotidien le respect des principes établis et des bonnes pratiques, aider les développeurs, compléter les consignes, contrôler le travail livré. • Concevoir et réaliser : développer les stories les plus complexes et, si besoin, effectuer la conception détaillée des solutions. • Accompagner les Product Owners : qualifier les nouveaux besoins, produire les macro-estimations et donner les éléments nécessaires pour prioriser le backlog. • Travailler avec l'architecte : détecter les difficultés, proposer des esquisses de solution et challenger les options envisagées. • Suivre la qualité et l'exploitabilité : relire et traiter les merge requests, adapter la chaîne de CI, surveiller le comportement des applications et proposer des dashboards complémentaires, en lien avec les intégrateurs et les équipes d'exploitation. • Animer et recruter : contribuer à l'animation technique des équipes (ex. sessions Lunch & Learn), assurer une veille technologique et participer au recrutement des développeurs.

Dans le cadre d'un projet Data / Big Data, nous recherchons un Data Engineer confirmé / senior spécialisé en Python et Spark/PySpark, pour intervenir sur une plateforme Cloudera CDP. 🎯 Contexte de la missionVous interviendrez sur des sujets de développement Data Engineering, avec la conception et l'évolution de pipelines de données en environnement Big Data, notamment sur des traitements batch et streaming. 🛠️ MissionsDévelopper des pipelines et traitements Data en Python / Spark / PySpark Concevoir et maintenir des traitements Spark Streaming Participer au développement et à l'intégration de flux de données Intervenir sur une plateforme Cloudera CDP 7.1.9 Travailler avec les différents composants de l'écosystème Big Data Participer aux évolutions et à l'industrialisation des traitements Data Collaborer avec les équipes Data / Back / Infrastructure 💻 Environnement techniqueIndispensables : ⭐ Python ⭐ Apache Spark ⭐ PySpark Expérience significative en Data Engineering Environnement fortement apprécié : Cloudera CDP 7.1.9 Kafka NiFi Kubernetes / K8s Hive Ozone Iceberg Data Virtualization Spark Streaming

Expert(e) Java (CIAM) - (f/m/d). Basé à Lille (hybride), mission longue. L'équipe en charge de l'authentification recherche un(e) expert(e) Java spécialisé(e) CIAM pour assurer le développement et le delivery des briques cœur du système d'authentification. Objectifs : migration d'architecture de Spring Security 5 vers Spring Security 7, conception et maintenance des moteurs d'authentification, gestion des jetons et intégrations protocolaires. Le rôle est hands-on et inclut l'implémentation de patterns résilients basés sur Kafka (Patterns CDC & Outbox), la mise en place de tests automatisés (Playwright, Gatling/Blazemeter) dès la phase de développement, et l'intégration d'un tracking précis via Amplitude. Le/la candidat(e) devra travailler sur la mise en œuvre d'A/B testing via Statsig, traduire les besoins produit en implémentations mesurables, et assurer la trajectoire de remboursement de la dette technique tout en maintenant une cadence de delivery soutenue. La conception des flux complexes devra s'appuyer sur le C4 Model et les services seront déployés et exploités sur Kubernetes avec Helm, avec une observabilité assurée via Datadog.

ContexteLe Bénéficiaire souhaite une prestation d'accompagnement dans l'objectif d'assurance d'un service d'ingénierie cybersécurité. Dans le cadre du déploiement du SOC ITG et de la collecte des logs sécurité de ses entités métiers, le bénéficiaire souhaite une prestation en ingénierie Data Collect et Data Transformation autour des solutions techniques Elastic Search et Elastic Beats, afin d'enrichissement d'un "puit de donnée sécurité" pour permission de la corrélation d'événements, et la mise en place d'alerting sur des paterns de sécurité. MissionsMise en place et définition des mécanismes de collecte Définition des patterns d'architectures de la collecte Définition et mise à jour de l'architecture de l'infrastructure (schéma, point réseau (flux, routage)) Déploiement de ces dispositifs sur le socle d'infrastructure Groupe, et sur les entités opérées dans les filiales ou à l'étranger Définition et mise en œuvre d'une stratégie de collecte uniforme et standardisée via Ansible Mise en place de pipelines d'enrichissement de la donnée Maintien en condition opérationnelle de la plateforme de collecte et des agents de collecte Mise en place de processus d'onboarding de nouvelles sources de logs ou d'assets en lien avec les responsables des systèmes monitorés Mise en place et évolution d'un système de monitoring de l'infrastructure et alerting sur la collecte des logs Création et évolution de dashboards avec Kibana Réponse aux audits réglementaires et internes Support et conseil aux entités utilisatrices des services Maintien et contrôle de la donnée collectée (exhaustivité et qualité) Outils & EnvironnementTechnologies/produits composants l'infrastructure : Kibana, Ansible, ElasticSearch, ElasticBeats, Logstash, Kafka, KSTREAM DevOps : Gitlab, Jenkins, Ansible Administration des systèmes (Linux et Windows) Développement en Python, Java Logstash Connaissance / Maîtrise Data Connaissance / Maîtrise technique de l'environnement DevOps Maîtrise technique de l'environnement Data Expertise Java, Python Expertise ETL, Bash Expertise couche d'accès et d'échange (Kafka) Expertise Python Expertise Elastic Stack (+ développement Logstash) Maîtrise des outils de dev/devops (Git, Ansible, Artifactory, Jira, Java) Bonne connaissance système RHEL/CentOS Docker

Mission longue basée à Lille (hybride). Produit digital Front & Back utilisé par plusieurs typologies d'utilisateurs : utilisateurs internes pilotant la stratégie de dispatch aval, et utilisateurs B2B passant des commandes pour des partenaires wholesale ou des franchises. Dans le cadre d'une accélération de la stratégie wholesale et franchise, un fort développement et un déploiement à grande échelle sont prévus. L'équipe actuelle compte 9 personnes : 2 Product Managers, 6 Développeurs et 1 Support Engineer. Vous contribuerez aux développements des nouvelles fonctionnalités et partagerez votre expertise au sein de la feature team. Au quotidien, vous serez référent·e côté Front tout en étant capable d'intervenir sur le Back. Vous concevrez des interfaces fluides et performantes sous React, assurerez le développement et le maintien de services Back résilients et scalables sous Java/Spring Boot, garantirez des déploiements continus et sécurisés, et veillerez à la qualité du code via les bonnes pratiques de développement (code review, pair programming, etc.). Périmètre technique : Frontend : React 19, Playwright. Backend : Java 21+, Spring Boot 4+, Architecture microservices, REST, Kafka. DevOps & Cloud : Intégration continue sur GCP, Kubernetes, Docker, Github Actions. Observabilité : Datadog, Opentelemetry. Outils collaboratifs : Confluence, Slack, Jira. IA : Github Copilot. Abonnez-vous à la page NaxoTech sur LinkedIn pour découvrir nos offres régulières

Poste : Software Engineer avec 4-6 années d'expérience. Mission longue basée à Lille (mode hybride). Le poste s'inscrit dans un contexte de transformation d'un système d'information consistant à migrer un monolithe vers une architecture microservices tout en assurant la stabilité des applications existantes. Objectifs : accélérer la transformation vers des modules microservices, renforcer l'expertise technique pour garantir robustesse et maintenabilité, assurer la continuité de service via un support de Niveau 3 et promouvoir l'amélioration continue (suivi des delivery metrics notamment DORA). Missions attendues : développement de nouvelles fonctionnalités et corrections (modules microservices), conception d'architectures adaptées, optimisation et refactorings pour la migration, participation aux phases de tests et de qualification avec les équipes QA, analyse et résolution d'incidents complexes en production (Support N3), rédaction de comptes-rendus d'analyse et formalisation de plans d'action, participation aux cérémonies agiles et pilotage des indicateurs de performance du delivery. Livrables : code source versionné, testé et documenté, analyses d'impact détaillées, mise à jour de la documentation technique et fonctionnelle, participation à la rédaction des besoins et spécifications, estimations de charges pour les développements. Le prestataire est garant de la qualité des livrables (respect des normes de qualité, optimisation des performances, non-régression et couverture de tests adéquate). Abonnez-vous à la page NaxoTech sur LinkedIn pour découvrir nos offres régulières

Dans le cadre du développement et de l'évolution de plusieurs produits digitaux à dimension e-commerce et services, nous recherchons un Développeur Full Stack Expert, avec une forte prédominance Backend. Vos principales missions seront : Concevoir et développer des fonctionnalités Backend en Java / Spring, à partir de Java 11 Concevoir, développer et maintenir des API Intégrer et exploiter Kafka dans les échanges entre applications Développer et optimiser des requêtes SQL Intervenir ponctuellement sur BigQuery Participer au développement Full Stack, avec une maîtrise des problématiques Web SSR / SPA Garantir la qualité du code à travers les tests unitaires, Sonar et les code reviews Utiliser des outils d'IA appliqués au développement pour accompagner la revue de code et les activités de développement Challenger les résultats proposés par les outils d'IA et conserver une approche critique sur leur utilisation Participer aux différentes étapes du développement dans un fonctionnement Agile Le poste s'adresse à un profil expérimenté, capable d'être autonome techniquement et d'intervenir sur des sujets Backend tout en conservant une véritable culture Full Stack.

L'entreprise Idemys, cabinet tech indépendant basé à Paris, recrute pour l'un de ses clients, une grande banque en ligne française, un(e) Ingénieur(e) Études pour son équipe Paiements & Services, au sein de la DSI. Le poste Rattaché(e) au responsable des applications Paiements et Services, vous êtes l'expert(e) fonctionnel(le) d'un périmètre au cœur du quotidien des clients : virements instantanés et virements hors zone SEPA ; Verification of Payee et vérification IBAN ; mobilité bancaire ; gestion des litiges ; cycle de vie des cartes bancaires ; transactions d'une marketplace. Vos missions Accompagner les métiers dans l'expression de leurs besoins, puis mener le cadrage, les études de faisabilité et les analyses détaillées. Rédiger les spécifications fonctionnelles détaillées en anglais pour les équipes de développement. Superviser les développements externalisés : challenger les solutions et les charges, contrôler les délais, la qualité et la conformité des livrables. Piloter les tests IT, la recette end-to-end et la phase VSR. Préparer et suivre les mises en production. Assurer le suivi et la résolution des incidents sur le périmètre. Établir et suivre les aspects budgétaires des travaux confiés. Sur les projets que vous pilotez : animer les comités, coordonner les acteurs, organiser la formation des utilisateurs et participer à la négociation avec les sous-traitants.

Vous interviendrez dans le cadre d'un programme de modernisation du SI qui aura pour objectif de: Exposer les API's du SI, Orchestrer les échanges inter- applicatifs, Gérer les événements métiers, Standardiser les modèles de données, Mutualiser les intégrations à l'international, Garantir la traçabilité et la supervision des échanges. A ce titre, vos missions consisteront à contribuer: Concevoir les API's et les flux d'intégration comme produit, Découper le besoin métier, Définir et animer le catalogue de services API's, Interagir avec le PO pour capter les besoins, aligner la roadmap d'intégration, Analyser et modéliser les processus via BPMN incluant la cartographie des flux, Identifier les points d'intégration synchrone et asynchrone, Modéliser les données, mapping et évolution du dictionnaire de données, Spécification fonctionnelle d'interfaces, et exigences, Rédaction et spécifications des scénarios de tests fonctionnels et mocks, Les livrables attendus sont les suivants: Blueprints, User Stories, Spécifications techniques et fonctionnelles Mapping de données, Scénarios de tests fonctionnels et Spécifications de Mock, Fiches descriptives des services pour le portail API, Dossier de Conception fonctionnelle,

Apporter une expertise technique aux projets Data et IA, en lien avec les équipes métiers et les équipes spécialisées. Conseiller et accompagner le choix, l'intégration et la mise en œuvre des solutions. Garantir leur exploitabilité et leur conformité aux règles de sécurité et d'architecture du SI. Assurer la pertinence, la pérennité et l'évolution des solutions en phase avec l'état de l'art. Assurer le support de niveau 2 auprès des équipes de production. Veiller à la disponibilité et au bon fonctionnement des dispositifs de mesure de la qualité de service.

Dans le cadre du renforcement d'une équipe IT, nous recherchons un Développeur Fullstack Java / Angular expérimenté, disposant de solides compétences en développement backend et frontend, ainsi que d'une bonne maîtrise des pratiques DevOps. Vous interviendrez sur des projets de développement et d'évolution d'applications métiers au sein d'un environnement technique exigeant. Vos principales missions : Concevoir, développer et maintenir des applications Fullstack en Java et Angular. Participer à l'analyse des besoins et à la conception des solutions techniques. Développer et optimiser des API REST et des microservices. Mettre en œuvre des échanges de données et des traitements événementiels avec Kafka. Participer à l'intégration continue et au déploiement des applications (CI/CD). Contribuer à l'automatisation des processus de build, de tests et de déploiement. Garantir la qualité, la performance, la sécurité et la maintenabilité du code. Réaliser les tests unitaires et d'intégration. Participer aux revues de code et à l'amélioration continue des pratiques de développement. Collaborer étroitement avec les équipes techniques, fonctionnelles et DevOps.