Trouvez votre prochaine offre d’emploi ou de mission freelance Apache Kafka

Contexte Projet dans le domaine des services bancaires, spécialisé en exécution et clearing de dérivés. Environnement technique basé sur Java JEE, Linux, PLSQL Oracle, Spring. Le projet s’inscrit dans le cadre d’une modernisation d’une plateforme de clearing de dérivés listés (Middle et Back Office) avec une architecture microservices Java 17+, Spring Boot, Kafka/MQ, bases de données Oracle et une couche UI Angular. Missions Définition et création des environnements nécessaires aux développements de nouvelles applications Configuration et gestion des pipelines Jenkins pour automatiser les processus de build, de test et de déploiement Définition et mise en œuvre de la stratégie Git pour les équipes de développement Configuration et gestion des outils de sécurité tels que Sonar, OTKR, etc. Gestion de l'obsolescence applicative et infrastructurelle en monitorant les systèmes et en fournissant des recommandations pour améliorer la sécurité et la performance Provisionnement des infrastructures pour des environnements non productifs (commande de VM, base de données, ouverture de flux, provisionnement et configuration de middleware tels que MQ, Kafka, etc.) Collaboration avec les équipes de développement pour créer de nouvelles applications, en définissant l'écosystème et l'infrastructure, les pipelines, et l'architecture technique Coordination avec les développeurs et les autres équipes pour garantir une intégration fluide des systèmes et des processus Mise en œuvre de pratiques DEVSECOPS dans des environnements applicatifs complexes Utilisation d’outils de gestion de versions tels que Git et des stratégies de branching Gestion des pipelines Jenkins et lancement d’outils d’industrialisation du développement (CI/CD) Connaissance des principes de sécurité applicative et de conformité, ainsi qu’une expérience avec des outils tels que SonarQube, OWASP, etc.

ASTRELYA Île-de-France, France (Hybride) Astrelya est un cabinet de conseil franco/suisse, en très forte croissance depuis sa création en 2017, spécialisé dans la transformation digitale, l’excellence opérationnelle et l’innovation technologique. Il est composé de 300 expert passionnés. Le cabinet accompagne ses clients sur l’ensemble du cycle de transformation, depuis la phase de cadrage jusqu’à la mise en œuvre opérationnelle, avec une expertise forte en Data/IA, Cloud, DevOps et méthodes agiles. Astrelya se distingue par un modèle fondé sur la proximité, la confiance et une culture humaine forte, qui place les collaborateurs au cœur de la création de valeur. Dans le cadre du renforcement des équipes d'un client, nous recherchons un(e) QA Technico-Fonctionnel(le) pour intervenir de manière transverse au sein de deux équipes agiles. Vous serez garant(e) de la qualité des livrables en assurant la conception, l’exécution et l’automatisation des tests fonctionnels et techniques. Vous évoluerez dans un environnement orienté API et architectures événementielles , avec une forte dimension fonctionnelle et une démarche d’amélioration continue de la qualité. Concrètement, vous allez : Définir et mettre en œuvre la stratégie d’automatisation des tests des projets. Estimer les charges de développement et planifier les campagnes de tests. Identifier, spécifier et concevoir les cas de tests automatisables. Maintenir le référentiel de tests automatisés de non-régression ainsi que les jeux de données associés. Développer les scripts de tests dans les technologies retenues par les équipes. Exécuter les campagnes de tests et analyser les résultats. Déclarer et suivre les anomalies dans Jira. Produire et suivre les indicateurs de qualité et d’automatisation. Participer à l’amélioration continue des frameworks d’automatisation en collaboration avec les équipes Delivery Excellence. Travailler en étroite collaboration avec les équipes Développement et DevOps afin d’intégrer les tests dans les pipelines CI/CD et renforcer l’observabilité des applications. Identifier et mettre en œuvre des actions d’amélioration continue visant à optimiser la qualité des produits. Votre futur environnement technique : Automatisation & Tests Selenium (Java) Postman Rest-Assured JUnit, TestNG Cucumber Tests API Contract Testing Développement Java Maven JavaScript Outils Jira Xray Confluence GitLab API & Intégration REST API GraphQL SOAP Swagger / OpenAPI Messaging & Architectures événementielles Kafka RabbitMQ Event-Driven Architecture

📢 Recherche – Développeur / Ingénieur Apache Camel (H/F) Dans le cadre de plusieurs projets d’intégration et de modernisation SI, nous recherchons des profils expérimentés Apache Camel pour intervenir sur des environnements techniques exigeants. 🔹 Missions Conception et développement de flux d’intégration avec Apache Camel Mise en place d’architectures ESB / microservices Intégration d’applications via API, messaging, systèmes distribués Participation à la résolution d’incidents et à l’optimisation des performances Collaboration avec les équipes architecture, data et métiers 🔹 Profil recherché Expérience significative sur Apache Camel Bonne maîtrise des patterns d’intégration (EIP) Connaissances en Java / Spring Boot Expérience sur des environnements API / messaging (Kafka, MQ, etc.) Capacité à intervenir en autonomie sur des sujets techniques complexes Anglais professionnel requis 🔹 Environnement technique (selon projets) Java, Spring Boot, Apache Camel Kafka / RabbitMQ / ActiveMQ REST APIs / Microservices Docker / Kubernetes Cloud (AWS / Azure) 🔹 Conditions 📍 Localisation : France 💼 Mission long terme 🚫 Non ouvert à la sous-traitance.

Le QA automaticien assure le contrôle qualité des projets en appliquant des méthodes de tests. Cela inclut la relecture des spécifications et des critères d’acceptance, la rédaction de la stratégie de recette et des cahiers de tests, la conception des tests et kits automatisés, l’exécution des campagnes de tests automatisés ou manuels. Il gère la déclaration ainsi que le suivi des anomalies, et fournit également des indicateurs d’avancement en remontant les alertes planning ou qualité associée. Le QA automaticien conseille les Business Analyst et travaille également en collaboration avec les Développeurs. Conditions de télétravail Pas de télétravail les 3 premiers mois de la mission 3 jours de présence sur site obligatoires ensuite Compétences souhaitées : Bonne expérience dans l’automatisation des tests Connaissance des outils de testing : Cucumber, Javascript, Pluging Jira XRay API (Postman, …), Topic Kafka et bases de données PostgreSQL et MongoDb Connaissance de la programmation en script (ex : Cucumber, Python , JMeter…) Pratique de l’intégration des tests dans une solution d’orchestration de pipelines de livraison (XlRelease ou autre) Connaissance de l’environnement Linux La connaissance des volets performance, robustesse et limites associés aux outils de profiling Dynatrace, Yourkit, … Connaissance de la méthode Agile et d’outils de type Jira : première expérience vécue, à défaut une formation doit avoir été suivie. Activités principales, menées dans le cadre de l’Agile : Participer aux cérémonies agiles (Daily Meeting, Poker planning, Rétrospective, Bilan de sprint & Démonstration) Prise en main et amélioration des kits de tests existants Définir les tests avec leurs jeux de données Rédiger les tests en langage Gherkin (Cucumber) et les fonctions javascripts associées pour l’automatisation Exécuter et analyser les tests Enrichir les kits de non-régression toujours dans une démarche d’exécution automatisée Contrôler la bonne génération des bilans de recette à partir de Jira/XRay. Qualités requises : Convaincu de la démarche d’automatisation Autonomie, investissement et prise d’initiative, Travail en équipe, collaboration, Bonne communication orale et écrite, Curiosité et apprentissage, Analyse et synthèse, Organisation et pragmatisme, Disponibilité et réactivité, Anglais Formation et expérience : Un diplôme d’ingénieur Une expérience professionnelle préalable réussie en informatique et/ou paiement.

Intégré(e) dans les équipes Plateforme Data le/la consultant(e) aura pour mission de concevoir, développer et maintenir des solutions de traitement de données à grande échelle, en utilisant des technologies telles que BigQuery, BigTable, Apache Kafka et Apache Spark. Mais aussi contribuer à des projets Data en apportant son expertise sur les tâches suivantes : montée en compétence sur l'ETL BigL, participation à la réalisation de projets métier dans le cadre de la solution offline ELT in-House Big Loader et BDI/DBT, Le/la consultant(e) travaillera en étroite collaboration avec les équipes de développement et de production afin de garantir la qualité et la performance des solutions mises en place. Livrables : ● Accompagner techniquement les autres membres de l'équipe (juniors) ● Active participation aux choix d'architecture technique Livrer les composants

Les missions : Analyser les besoins utilisateurs et faire preuve de force de proposition Concevoir et développer les solutions, réaliser les tests (unitaire, intégration et charge) et contribuer à la mise en production, Assurer la qualité du code et réaliser la documentation associée, Contribuer à la maintenance corrective et évolutive des applications, Assurer le support utilisateurs, Apporter vos connaissances et votre expertise au sein de l’équipe. Compétences techniques : Back : Java, Spring Boot Front : Connaissance / 1ère expérience sur un framework JS Expérience dans l'utilisation d'un ou plusieurs Broker : RabbitMQ, Kafka, JMS Base de données : SQL Server, MongoDb Expérience confirmé dans une architecture orientée microservice Environnement de test : jUnit Environnement de versionning : Git Outils utilisés : Outils de développement : IntelliJ, Maven, Sonar Environnements de déploiement : Jenkins, Ansible Outils de gestion de projet : JIRA, Confluence

Contexte Dans le cadre de l’évolution et de la maintenance de plusieurs applications web stratégiques, nous recherchons un Développeur Full Stack Java expérimenté afin d’intervenir sur des projets liés aux plateformes d’échanges et aux services applicatifs. Le consultant intégrera une équipe projet organisée en environnement agile et participera aux différentes phases de conception, développement, intégration et amélioration continue des applications. Missions Participer à la conception technique des applications. Rédiger les spécifications techniques et contribuer aux choix d’architecture. Développer les fonctionnalités backend et frontend. Réaliser les tests unitaires et les tests d’intégration. Participer aux phases d’intégration et de déploiement. Optimiser les performances et assurer la correction des anomalies. Contribuer à l’amélioration continue des pratiques de développement et de qualité logicielle. Participer aux échanges techniques avec les équipes projets et architecture. Environnement technique Backend Java JDK 11 / 17 / 21 Spring Boot Spring MVC Spring IOC Spring Batch Hibernate Tomcat APIs & Data REST SOAP Kafka Elasticsearch Oracle Frontend Angular JavaScript CSS Outils & Méthodologies Git IntelliJ IDEA / Eclipse UML CI/CD Méthodologies Agile / Scrum

ngénieurie Data expérimenté pour conception, construction et maintenance d' une infrastructure de données robuste et performance dans un environnement entièrement on-premise. Étroite collaboration avec les équipes Data pour garantir des pipelines fiables et de haute qualité sur notre infrastructure autogérée. Profil recherché : - Conception et construction des pipelines de données scalables pour le traitement batch et temps réel - Dévelopement et maintenance des workflows avec Apache Airflow (orchestration) et Apache Flink (traitement de flux) - Mise en place et opération des clusters Apache Kafka pour le streaming d'événements à haut débit - Déployement et administration la stack ELK (Elasticsearch, Logstash, Kibana) pour l'ingestion de logs, l'indexation, la recherche et l'observabilité - Écriture du code Python propre, efficacité et test pour la logique ETL/ELT et les outils internes - Garantie de la qualité des données, la fiabilité des pipelines et la résilience de l'infrastructure - Collaboration avec les équipes DevOps sur la planification de capacité et les opérations cluster - Accompagnement et augmentation en compétences des ingénieurs moins expérimentés

Intégré(e) dans les équipes Plateforme Data le/la consultant(e) aura pour mission de concevoir, développer et maintenir des solutions de traitement de données à grande échelle, en utilisant des technologies telles que BigQuery, BigTable, Apache Kafka et Apache Spark. Mais aussi contribuer à des projets Data en apportant son expertise sur les tâches suivantes : montée en compétence sur l'ETL BigL, participation à la réalisation de projets métier dans le cadre de la solution offline ELT in-House Big Loader et BDI/DBT,[Saut de retour à la ligne]Le/la consultant(e) travaillera en étroite collaboration avec les équipes de développement et de production afin de garantir la qualité et la performance des solutions mises en place.[Saut de retour à la ligne] Livrables : Accompagner techniquement les autres membres de l'équipe (juniors) Active participation aux choix d'architecture technique Livrer les composants

Nous recherchons un profil ingénieur de production référent pour rejoindre l'équipe Infrastructure d'une filiale bancaire en pleine transformation vers un modèle SRE / DevOps. Votre rôle Vous serez le garant technique transverse de la qualité d'intégration, de la fiabilité opérationnelle et de l'exploitabilité des solutions déployées. Votre temps se répartira entre le Bureau Technique (RUN, supervision, gestion des incidents) pour 60 % et des contributions transverses (documentation, automatisation, amélioration continue) pour 40 %. Vos missions principales Préparation et suivi des mises en production, contrôle des livrables techniques, intégration et paramétrage de solutions logicielles, tests techniques (unitaires, intégration, exploitabilité), analyse d'impacts et évaluation des risques, déploiement d'automatisations (scripts, pipelines CI/CD, IaC), standardisation des outils et bonnes pratiques, contribution aux services Platform Engineering, production de documentation technique (DEX, procédures, référentiels), et accompagnement des équipes. Stack technique Linux / Unix / Windows Server, Shell, Python, PowerShell, Docker, Kubernetes, Ansible, Terraform, GitLab CI, GitHub Actions, Jenkins, Prometheus, Grafana, Loki, Elasticsearch, Apache Airflow, ControlM, PostgreSQL, Redis, MongoDB, Kafka, RabbitMQ, GitHub / GitLab, Java, NodeJS.

Nous recherchons un Analyste Support Applicatif Senior pour renforcer la fiabilité et la disponibilité de notre plateforme digitale. Au plus près des équipes d’ingénierie, vous jouerez un rôle clé dans la gestion des incidents , le diagnostic applicatif , le support aux déploiements et l’amélioration continue de nos outils et processus. Vos missions : Assurer le support applicatif L2/L3 et garantir la stabilité des services en production. Analyser et résoudre des incidents complexes sur l’ensemble de la chaîne applicative : services Java/Spring Boot, APIs, Kafka, PostgreSQL. Participer aux déploiements en environnements conteneurisés (Kubernetes/OpenShift) : contrôles, rollback, coordination. Maintenir et améliorer les outils opérationnels : dashboards, alerting, runbooks, documentation. Contribuer à la fiabilité de la plateforme via l’ automatisation et les pratiques GitOps . Collaborer avec les équipes Dev, QA et Platform pour mener des post-mortems , gérer les problèmes récurrents et améliorer la stabilité globale.

🎯 MISSIONS : Intégré(e) aux équipes d'un de nos clients grand compte, vous participerez activement à la conception et au développement des évolutions des socles techniques des solutions (Java 8,11 vers Java 21), en étroite collaboration avec l'équipe et le chef de projet. L'activité sera orientée vers l'optimisation des pratiques de conception et de développement. Le détail de vos missions sera le suivant : - Participer à l'étude et à la proposition de solutions techniques (vous serez force de proposition sur les choix de conceptions et d'algorithmes). - Participer aux cérémonies des équipes : PI Planning, chiffrages. - Concevoir et paramétrer des solutions pour répondre aux enjeux d'évolution tout en garantissant la stabilité et la performance nécessaire aux équipes en charge d'apporter la valeur métier. - Implémenter et tester les fonctionnalités réalisées. - Réaliser des revues de code en collaboration avec votre équipe. - Participer à la vie du projet au travers de votre intégration au sein de l'équipe. - Rédiger la documentation technique nécessaire. - Contribuer à l'amélioration continue, par des rétrospectives régulières, une recherche continue de simplification, d'optimisation et d'apport de nouveautés pragmatiques. - Apporter la culture de la robustesse et de la performance (méthodes, mesure, améliorations, outils) Environnement technique : Java 8, 11, 21 Python 3 React 19 Implémentation de solutions avec un workflow d'activité BPMN Technologies de streaming, notamment KAFKA Environnement conteneurisé (Openshift)

Contexte : Dans le cadre de la structuration et de la gouvernance des données au sein d’un système d’information complexe et fortement interconnecté, nous recherchons un Data Steward. Le Data Steward joue un rôle clé dans la qualité, la fiabilité et la bonne utilisation des données au sein de l’organisation. Il agit en interface entre les équipes métiers, les équipes IT et les data owners afin de garantir la cohérence, la traçabilité et la conformité des données tout au long de leur cycle de vie. Missions principales :Gouvernance et qualité des données Définir, formaliser et maintenir les règles de gestion des données Mettre en place et suivre les indicateurs de qualité (complétude, unicité, cohérence, fraîcheur) Identifier, analyser et corriger les anomalies de données Participer à la mise en place de processus de Master Data Management (MDM) Assurer le suivi des référentiels de données et des données de référence Modélisation et référentiels Contribuer à la définition des modèles de données conceptuels et logiques Participer à la structuration des dictionnaires de données et catalogues Garantir l’uniformisation des définitions entre les systèmes Collaborer avec les Data Architects et Data Owners sur la définition des objets métier Qualité et exploitation des flux de données Suivre les flux de données issus des systèmes sources (API, ETL, ESB, streaming) Contrôler la qualité des données injectées dans les plateformes analytiques Participer à la mise en place de contrôles automatisés (data quality checks, profiling, dédoublonnage) Contribuer au monitoring des flux et à la détection d’anomalies Support aux métiers Accompagner les utilisateurs métiers dans la compréhension et l’usage des données Garantir la bonne utilisation des référentiels dans les outils opérationnels et décisionnels Participer à la diffusion d’une culture data au sein des équipes Environnement technique :Data & Intégration API REST / SOAP ETL (type Azure Data Factory ou équivalent) ESB / Message Broker (Kafka ou équivalent) Bases de données relationnelles (PostgreSQL, SQL Server, MySQL) Bases NoSQL (MongoDB) Cloud & Data Platform Environnements Cloud (Azure principalement, éventuellement AWS ou GCP) Data Warehouse / Data Lake Solutions de gouvernance et catalogage de données BI & exploitation Outils de visualisation (Power BI, équivalent) SQL avancé pour analyse et contrôle qualité Outils de monitoring des flux et de data quality

Dans un environnement agile à l’échelle (SAFe), vous intervenez sur une ligne de produits dédiée à la collecte et livraison de données. Les équipes sont organisées en Feature Teams dans un cadre DevSecOps, réparties entre équipes internes et distantes. Missions Participer à l’analyse des besoins et proposer des solutions techniques adaptées Estimer, chiffrer et contribuer à la conception des développements Prendre en charge les développements complexes Garantir la qualité du code et le respect des bonnes pratiques (tests, sécurité, performance) Réaliser et superviser les revues de code Accompagner et coacher les développeurs de l’équipe Participer à l’amélioration continue et aux rituels techniques Contribuer à la mise en place de CI/CD et de l’observabilité applicative Participer à la gestion des incidents et au support de production Assurer une veille technologique et porter la vision technique du produit Environnement technique Backend : PHP / Symfony, Java Frontend : AngularJS DevOps : Docker, Kubernetes (OpenShift), Azure Data / Middleware : Kafka, Elasticsearch, MySQL, PostgreSQL, Redis, Solr Monitoring : ELK, Grafana, Varnish Scripting : Shell Architecture microservices / réactive Profil recherché Expérience confirmée en développement et architecture logicielle Expertise PHP et AngularJS (obligatoire) Bonne maîtrise des environnements DevOps (Docker, Kubernetes, OpenShift) Expérience sur systèmes complexes / production critique Leadership technique et capacité de mentoring Culture DevSecOps et Agile (SAFe appréciée)

Contexte de la mission : Dans le cadre de plusieurs projets techniques de la Direction Client, notre client recherche un DBA expérimenté afin d’assurer l’expertise, l’installation, l’administration et l’industrialisation des environnements bases de données. Le consultant interviendra sur des infrastructures critiques en environnements production, pré-production, intégration et recette. Il apportera son expertise technique sur les problématiques de performance, de disponibilité, de capacité et d’automatisation des plateformes. Objectifs et livrables -Fournir une expertise sur le comportement et les limites des SGBD -Réaliser les estimations de charge et les analyses de faisabilité -Participer à la définition des plannings et prérequis techniques -Rédiger les documents techniques (DAT, MOI, MPI) -Installer, configurer et administrer les bases de données -Déployer les socles techniques et paramétrages nécessaires -Participer à l’industrialisation des installations et de la supervision -Assurer le maintien en condition opérationnelle des infrastructures -Mettre à jour les référentiels techniques -Accompagner les projets techniques et équipes d’exploitation Environnement technique : Cassandra, PostgreSQL, MongoDB, MariaDB/Galera, Elasticsearch, Kafka, Oracle, Linux, Docker, Kubernetes, VMware, GitLab, Ansible, Terraform, Prometheus, Grafana. Profil recherché : Nous recherchons un DBA senior disposant d’au moins 5 ans d’expérience sur des environnements critiques et complexes. Le candidat doit posséder une forte expertise Cassandra ainsi qu’une bonne maîtrise des bases de données NoSQL et SGBDR. Le profil doit être capable d’intervenir aussi bien sur l’administration, l’optimisation, la supervision que l’industrialisation des infrastructures. Une bonne maîtrise des environnements Linux, de l’automatisation et des outils DevOps est attendue. Une expérience en environnement cloud, ainsi qu’une capacité à travailler en équipe projet et exploitation, seront fortement appréciées.

Contexte du besoin L’équipe ‘Socles Data’ de la Direction Technique Informatique s’occupe de gérer les socles techniques DATA du système d’information. Ceux–ci répondent aux besoins de pilotage, de mise à disposition de tableaux de bord décisionnels, d’exploration de données, de Data science, etc. Les missions de l’équipe se traduisent par la fourniture d’outils logiciels Data industrialisés et exploitables, la rédaction de dossiers d’architecture, de normes et bonnes pratiques, la réalisation d’études, la recherche et la qualification de nouveaux outils, mais également l’administration et le maintien en conditions opérationnelles des socles DATA. Objet de la prestation Le présent marché spécifique a pour objet la recherche d'une prestation d'expertise technique Big Data / Hadoop de technologie Cloudera, pour renforcer l'équipe 'Socle DATA'. Localisation : Gradignan Description du besoin : La mission consiste à assurer le maintien en conditions opérationnelles des socles Hadoop Cloudera Hors-Prod et Prod et la participation aux projets d’évolution technique de ces socles. Activités principales : Administration et exploitation des socles Hadoop : supervision, optimisation, gestion des incidents et des performances ; Capacity planning : suivi et mise en place d’outils et procédures ; Maintenance proactive : application des correctifs, mises à jour, suivi des évolutions technologiques ; Rédaction de procédures d'administration et d’exploitation ; Intégration avec l'outillage de l'écosysteme DSI Agirc-Arrco pour l'exploitation du SI Support expertise aux équipes Etudes et exploitation Projets d’évolution des architectures techniques (évolutions logicielles et matérielles, sécurité, amélioration de l’existant, évolution des fonctionnalités techniques ou fonctionnelles) : la participation attendue peut se situer sur le pilotage, la définition d’architecture et la rédaction des dossiers, la mise en œuvre. Hadoop est le périmètre technique principal d’exécution de la mission ; cependant des compétences supplémentaires sur d’autres solutions Data seront très appréciées. La mission nécessite à la fois une totale autonomie et une capacité de travail en équipe et de communication. Des astreintes ou interventions ponctuelles en HNO pourront être ponctuellement demandées. Reporting hebdomadaire Tableau de bord Mensuel de suivi d'activités Documentations techniques: Normes, principes, dossier d’architecture, dossier d’administration, dossier d’exploitation, modes opératoires Transferts de connaissances : organisation de session de transferts de connaissances et rédaction de supports. Gestion demandes: Tickets incidents / demandes / changements dûment complétés Contribuer à la continuité de services au sein de l'équipe Environnement Socle Hadoop : Distribution Hadoop Cloudera CDP (version 7.1.9, 7.3.x ) : HDFS, YARN, Cloudera Manager, Hive, Hue, Impala, Spark, Zeppelin, Ranger, Knox, Zookeeper, Iceberg ... Langages de scripting et de developpement : Shell, Python, Spark Moteurs de requêtage : Hive, Impala, SQL, ... Systeme d'exploitation : Linux Redhat Environnement Décisionnel: Teradata, ETL Datastage , PowerBI, SAS Autres environnements techniques: Base de données : PostgreSQL Data Streaming : Kafka, IBM Infosphere CdC Socle technique infrastructure : Kubernetes, Ansible, Linux RedHat, Vmware Exploitation: : ordonnanceur IWS, sauvegarde HDPS, supervision Prometheus / Grafana,