Trouvez votre prochaine offre d’emploi ou de mission freelance Apache Kafka à Paris

Je recherche pour un de mes clients un Tech Lead Data : Dans ce cadre, la nouvelle squad data aura la charge de : • La migration et le déploiement en production de traitements de données sur GCP (workflows) • La copie d’historique de données depuis le data warehouse on-prem vers GCP BigQuery • La mise en place d’un orchestrateur pour les traitements de données sur GCP • La mise en place d’une solution de data lineage au niveau colonne de données. • L’automisation de processus de data engineering par l’IA ou une plateforme d’automatisation (e.g. n8n). La composante développement sera importante, jusqu’à 80% du temps et dépendra de la taille de la squad et de la charge de développement. Description de la prestation Missions principales : • Participer aux analyses, études d’impacts et cadrage techniques • Concevoir des solutions en respectant l’architecture data et les bonnes pratiques de développement • Réaliser le développement des data products et assurer la maintenance évolutive et corrective des data products existants • Effectuer des contrôles croisés entre développeurs ou des relectures de code afin d’assurer la qualité des développements réalisés par l’équipe • Rédiger la documentation technique des data products • Apporter une expertise de troisième niveau dans les incidents de production, et si besoin la réalisation de solution de contournements, ou de correctifs de manière à assurer une qualité de fonctionnement optimale • Accompagner les Data Engineers sur les bonnes pratiques, les choix d’architecture et dans leur travail au quotidien • Effectuer les audits et les contrôles des développements réalisés : Sécurité, Maintenabilité, Robustesse et Performance • Reporter l’activité à la Squad et travailler dans une démarche d’efficacité collective Livrables principaux : • Etudes d’impact technique • Faire des propositions techniques • Réaliser du code applicatif à l’état de l’art sur notre Data Platform GCP • Rédiger les documentations techniques liés à ta solution, incluant le modèle de données, les procédures, l’ordonnancements • Schéma de solution des flux, modèle de données • Fournir des chiffrages détaillés des futures réalisations • Relecture de code technique • Rédaction de SFD, STD, Manuel d’installation Compétences techniques : • Langages de programmation : Python, SQL, Scripts Shell • Services de streaming data : Kafka • Services d’ingestion des données : Kafka Connect, SFTP • Services de stockage : GCP BigQuery, Cloud Storage, Kafka, Sharepoint • Processing : Scripts Python, Data Build Tool (DBT), GCP Dataflow • Restitution : Looker (Dashboards, Explores de données), Fichiers de reporting (CSV, Excel) • Outils de collaboration et de CI/CD : GitLab •Utilisation de plateformes pour le développement et le déploiement : Docker, Kubernetes, Kustomize, Helm Charts, Terraform • Testing : Tests avec DBT, Tests de non-régression, collaboration avec la QA. • Outils IA et d’automatisation : Gemini Code Assist, Antigravity, n8n, Gitlab Duo • Manipulation des formats de fichiers : CSV, JSON, Avro, XML Compétences transverses : • Proactivité et prise d’initiative • Autonomie et rigueur • Capacité à communiquer, à travailler en équipe et excellent relationnel • Capacité d’adaptation aux changements • Curiosité, veille technologie sur le data engineering et sur l’AI / ML • Capacité à aborder des problèmes complexes de manière structurée • Aptitude à concevoir des solutions innovantes • Capacité d’écoute, d’analyse et de synthèse • Maitrise de l’agilité

L’Expert Middleware assure la conception, la mise en œuvre, l’exploitation et l’optimisation des plateformes middleware critiques de l’entreprise. Il garantit la disponibilité, la performance, la sécurité et la continuité de service des briques d’intégration. Il intervient en expertise transverse auprès des équipes projets et sécurise les engagements de service (SLA, support N3, astreintes). Responsabilités principales Architecture et conception Participer à la définition des architectures middleware (ESB, API Management, brokers, serveurs d’applications, ETL). Contribuer au choix des solutions techniques en fonction des besoins métier et des contraintes SI. Définir les standards d’architecture et les bonnes pratiques d’intégration. Accompagner les projets dans les phases de cadrage technique. Implémentation et configuration Installer, configurer et administrer les solutions middleware (IBM MQ, Kafka, WebLogic, JBoss, Tomcat, WebSphere…). Mettre en place les flux d’intégration applicative et les services Web (REST / SOAP). Déployer et sécuriser les API via des API Gateway (ex : Kong). Implémenter les mécanismes de sécurité (authentification, chiffrement, gestion des accès). Exploitation et maintenance (MCO) Assurer la supervision des plateformes middleware (performance, disponibilité, capacité). Intervenir en support N3 sur les incidents critiques en lien avec les équipes d’exploitation. Gérer les changements complexes et les évolutions techniques. Réaliser les montées de version et l’application des correctifs. Garantir la documentation des architectures, procédures et configurations. Optimisation et amélioration continue Identifier et mettre en œuvre des optimisations de performance et de scalabilité. Automatiser les tâches d’administration et de déploiement (scripts, pipelines CI/CD). Participer à l’amélioration des pratiques DevOps et à l’industrialisation des environnements. Support et expertise transverse Apporter un support technique aux équipes de développement et d’intégration. Former les équipes aux bonnes pratiques middleware. Participer aux cellules de crise et aux astreintes si nécessaire. Compétences techniques requises Concepts et architecture Intégration applicative : EAI, SOA, Microservices, API Management Architecture distribuée et systèmes orientés événements Middleware Serveurs d’applications : JBoss EAP, Apache Tomcat, WebSphere, Oracle WebLogic Brokers de messages / streaming : IBM MQ, Apache Kafka, RabbitMQ, ActiveMQ Transfert de fichiers : XFB Gateway, GoAnywhere MFT Protocoles : FTP, SFTP, FTPS, PeSIT API Gateway : REST, SOAP, Kong Langages et automatisation Scripting : Shell, Python, Perl, Ansible Développement : Java, Go Systèmes et outils OS : Linux, Windows Server Monitoring : Prometheus, Grafana, ELK Stack, Nagios CI/CD et pratiques DevOps Qualités attendues Forte capacité d’analyse et de résolution de problèmes complexes Rigueur, autonomie et sens des responsabilités Bon relationnel et capacité à travailler en transverse Gestion des priorités et résistance à la pression Curiosité technique et veille technologique active Profil recherché (indicatif) Bac +5 informatique ou équivalent Expérience significative (5 à 10+ ans) sur des environnements middleware critiques Expérience en production / exploitation fortement appréciée Anglais technique

Nous sommes à la recherche d'un(e) Administrateur Windows (H/F) pour un client dans le secteur de la protection sociale et de la mutualité, afin d’assurer le maintien en condition opérationnelle, l’évolution et la sécurisation des infrastructures Windows. 🚀 Contexte de mission Dans le cadre du renforcement de son équipe Exploitation, notre client recherche un Administrateur Windows capable d’intervenir sur des environnements techniques variés et critiques. Vous participerez au maintien en condition opérationnelle des infrastructures, à la gestion des incidents, au traitement des demandes et à l’évolution des socles techniques Windows dans un environnement mêlant Windows, Linux, Azure et outils DevOps. 🎯 Missions principales & rôle Garantir la disponibilité et le bon fonctionnement du système d’information Gérer les incidents, problèmes, demandes et changements en production et hors production Assurer l’exécution des traitements et des plans de production Réaliser les sauvegardes et participer à la continuité de service Administrer les environnements Windows postes et serveurs Gérer les évolutions autour d’Active Directory, Office 365 et Azure Mettre en œuvre les patchs et assurer le suivi de l’obsolescence des composants Participer à la supervision, au monitoring et à la gestion des alertes Automatiser les tâches récurrentes via PowerShell et scripts batch Rédiger les procédures, modes opératoires et documentations techniques Participer aux comités techniques et aux reportings d’exploitation Être force de proposition sur l’industrialisation, l’optimisation et l’amélioration continue 📊 Objectifs Maintenir un haut niveau de disponibilité des infrastructures Windows Réduire les incidents et améliorer les temps de résolution Sécuriser les environnements et assurer le patching des systèmes Automatiser les tâches récurrentes et fiabiliser les processus d’exploitation Garantir le respect des standards, procédures et bonnes pratiques Accompagner l’évolution des outils Microsoft et Cloud 🛠️ Stack technique claire Systèmes : Windows Server, Windows 11, Linux, Unix, AIX Microsoft : Active Directory, Azure AD, Office 365, Exchange, SharePoint, OneDrive, Teams, Yammer, Endpoint Manager, Intune, Windows Update for Business Réseau & Infra : DNS, DHCP, VMware, IIS, RDS Scripting & automatisation : PowerShell, Batch (.bat, .cmd) Supervision & monitoring : Prometheus, Grafana, Zabbix, Alerta, Splunk, ELK, Kibana Sauvegarde : TSM, RMAN, Rubrik CI/CD & DevOps : GitLab, GitHub, Docker, Kubernetes, Ansible Ordonnanceur : Automator, Control-M Middleware : WebLogic, ActiveMQ, Kafka Bases de données : SQL Server, Oracle, PostgreSQL, MySQL, MongoDB Méthodologies : ITIL, Agile, Scrum

Descriptif du poste Un groupe bancaire la création d'un service de reporting transverse pour sa division Monétique. Ce service est un asset important de la stratégie de la Monétique du groupe et doit permettre de fédérer et centraliser l'ensemble des reporting de type fichier, actuellement produits par différents systèmes et de les mettre à disposition sous différentes formes, via différents canaux. C'est dans ce contexte que les équipes IT recherchent un développeur Java/Data confirmé, qui saura participer au développement et à l'implémentation de ce service de Reporting, qui devra assurer le traitement de gros volumes de données pour générer des reporting de manière fiable et résiliente. La mission consistera à intégrer l'équipe agile en place pour participer à l'implémentation des reportings clients et des services associés avec le tech lead et ses coéquipiers, en collaboration avec les équipes du Socle Data de la monétique, mais aussi celles du portail client. Environnement technologique Évolution dans un environnement technologique récent : Java, API REST, PostgreSQL, ExaCC, Kafka, Cloud (Docker, Kubernetes), GitLab, etc.

Le datalake est utilisé comme une data plateforme pour les équipes IT et métiers. L'objectif de la mission est d'assurer le rôle de Data Engineer de ce datalake : Gestion de la production Gestion de la dette technique Revoir l'architecture actuelle et proposer des évolutions Développements liés aux projets Description : Mettre en place la collecte et la mise à disposition des données au sein de l’entreprise Industrialiser et mettre en production des traitements sur les données (par exemple : mise à disposition de tableaux de bords, intégration de modèles statistiques) en lien avec les équipes métiers et les équipes qui les analysent Activités et tâches : Acheminement de la donnée Mise à disposition de la donnée aux équipes utilisatrices Mise en production de modèles statistiques Suivi de projet de développement Développement job spark Traitement et ingestion de plusieurs formats des données Développement des scripts Développement et Implémentation des collectes de données, des jobs de traitement et Mapping de données Développement des moyens de restitution via génération de fichier et ou API & Dashboarding Collecter toutes les données et les fournir aux clients en tant qu'API ou fichiers Développer de pipelines d'ingestion à partir de différentes sources (streaming et batch) ainsi que des spark jobs le prétraitement des données et calcul des indicateurs de performance (KPI) Développer des API génériques d’ingestion et de traitement de données dans un environnement HDP Participer à la conception, mise en place et administration de solutions Big Data Participation à l’installation, administration et configuration des Hadoop clusters. Mise en place en Spring Boot des services d'extraction de data du système legacy (tera data), la data sera par la suite envoyée au data lake via des topics Kafka Normalisation et agrégation des données afin de produire les rapports sous forme de Business View

L’Expert Middleware assure la conception, la mise en œuvre, l’exploitation et l’optimisation des plateformes middleware critiques de l’entreprise. Il garantit la disponibilité, la performance, la sécurité et la continuité de service des briques d’intégration. Il intervient en expertise transverse auprès des équipes projets et sécurise les engagements de service (SLA, support N3, astreintes). Responsabilités principales Architecture et conception Participer à la définition des architectures middleware (ESB, API Management, brokers, serveurs d’applications, ETL). Contribuer au choix des solutions techniques en fonction des besoins métier et des contraintes SI. Définir les standards d’architecture et les bonnes pratiques d’intégration. Accompagner les projets dans les phases de cadrage technique. Implémentation et configuration Installer, configurer et administrer les solutions middleware (IBM MQ, Kafka, WebLogic, JBoss, Tomcat, WebSphere…). Mettre en place les flux d’intégration applicative et les services Web (REST / SOAP). Déployer et sécuriser les API via des API Gateway (ex : Kong). Implémenter les mécanismes de sécurité (authentification, chiffrement, gestion des accès). Exploitation et maintenance (MCO) Assurer la supervision des plateformes middleware (performance, disponibilité, capacité). Intervenir en support N3 sur les incidents critiques en lien avec les équipes d’exploitation. Gérer les changements complexes et les évolutions techniques. Réaliser les montées de version et l’application des correctifs. Garantir la documentation des architectures, procédures et configurations. Optimisation et amélioration continue Identifier et mettre en œuvre des optimisations de performance et de scalabilité. Automatiser les tâches d’administration et de déploiement (scripts, pipelines CI/CD). Participer à l’amélioration des pratiques DevOps et à l’industrialisation des environnements. Support et expertise transverse Apporter un support technique aux équipes de développement et d’intégration. Former les équipes aux bonnes pratiques middleware. Participer aux cellules de crise et aux astreintes si nécessaire. Compétences techniques requises Concepts et architecture Intégration applicative : EAI, SOA, Microservices, API Management Architecture distribuée et systèmes orientés événements Middleware Serveurs d’applications : JBoss EAP, Apache Tomcat, WebSphere, Oracle WebLogic Brokers de messages / streaming : IBM MQ, Apache Kafka, RabbitMQ, ActiveMQ Transfert de fichiers : XFB Gateway, GoAnywhere MFT Protocoles : FTP, SFTP, FTPS, PeSIT API Gateway : REST, SOAP, Kong Langages et automatisation Scripting : Shell, Python, Perl, Ansible Développement : Java, Go Systèmes et outils OS : Linux, Windows Server Monitoring : Prometheus, Grafana, ELK Stack, Nagios CI/CD et pratiques DevOps Qualités attendues Forte capacité d’analyse et de résolution de problèmes complexes Rigueur, autonomie et sens des responsabilités Bon relationnel et capacité à travailler en transverse Gestion des priorités et résistance à la pression Curiosité technique et veille technologique active Profil recherché (indicatif) Bac +5 informatique ou équivalent Expérience significative (5 à 10+ ans) sur des environnements middleware critiques Expérience en production / exploitation fortement appréciée Anglais technique

Votre rôle et vos principales missions En tant que Consultant Test de Performance vous serez en charge du cadrage et de l’exécution des tests de performance. Responsabilités principales Assurer le pilotage complet et la réalisation opérationnelle des tests de performance et de charge, depuis la phase de cadrage (stratégie, périmètre, exigences, architecture cible) jusqu’à l’exécution (scripts, campagnes, analyses, recommandations). 1. Cadrage - Définition et préparation des tests de performance Objectifs : Garantir un cadrage clair, complet et industrialisable des campagnes de tests de performance, en alignement avec : · les enjeux métier (SLA, coûts, criticité) · les contraintes techniques (architecture, volumétrie, sécurité) · les objectifs de performance (latence, throughput, capacité, endurance, robustesse) Responsabilités clés 1.1. Analyse du besoin et des exigences · Recueillir les besoins métier et techniques auprès des PO, architectes, équipes projets. · Identifier les objectifs : seuils de charge, scénarios critiques, SLA, KPI. · Étudier le fonctionnement applicatif et les flux techniques (IHM, API, batch). 1.2. Analyse d’architecture · Examiner l’architecture technique, logicielle et cloud · Identifier les composants sensibles : bases de données, middleware, frontaux, bus, API gateways, queues. · Proposer si besoin des évolutions ou optimisations préalables à la campagne. 1.3. Définition de la stratégie de test · Définir les types de tests : charge stress / limites endurance / vieillissement tests aux pics robustesse / défaillance · Déterminer les environnements nécessaires et leurs prérequis. · Proposer des outils adaptés : JMeter, Gatling, NeoLoad, LoadRunner, Performance Center. 1.4. Élaboration des plans de tests · Conception détaillée des scénarios utilisateurs simulés. · Définition du pacing, des répartitions, des montées en charge, des jeux de données. · Spécification des métriques collectées : applicatives (logs, APM, temps de réponse) systèmes (CPU, I/O, mémoire, réseau) infrastructure (monitoring cloud / on-prem) 1.5. Organisation & pilotage · Planification des campagnes. · Coordination avec les équipes Dev / Ops / Réseau / Infra. · Animation des ateliers de cadrage et réunions clés. 2. Exécution — Réalisation opérationnelle des tests de performance Objectifs : Construire, exécuter et analyser les tests de performance afin de : · valider les exigences de charge · détecter les bottlenecks · sécuriser les mises en production · recommander des optimisations techniques Responsabilités clés 2.1. Préparation de l’environnement · Vérification de la conformité des environnements (volumétrie, monitoring, données) · Mise en place ou adaptation de la collecte des métriques 2.2. Conception et réalisation des scripts · Développement de scripts de charge (Web, API REST, Webservices, message brokers — Kafka, MQ…). · Gestion des corrélations, paramètres, jeux de données, injections massives. · Validation technique des scripts avec les équipes applicatives. 2.3. Exécution des campagnes · Lancements contrôlés et pilotés des tests. · Gestion du Run : incidents, ajustement de charge, redémarrages, validations. · Réalisation de campagnes répétées selon besoin (1 à 2 campagnes / semaine, selon contexte). 2.4. Analyse et diagnostic · Analyse des résultats : temps de réponse taux d’erreur saturation CPU/RAM/I/O comportement des backend et middleware · Identification des goulots d'étranglement et points de contention. · Propositions de solutions correctives : dimensionnement, tuning (BD, JVM, Kafka, API), optimisation réseau, configuration AWS. 2.5. Reporting & restitution · Reporting journalier/hebdomadaire. · Rédaction de rapports de test de performance : synthèse exécutive détails techniques recommandations · Présentation aux équipes projet et au management. 3. Compétences clés attendues Techniques · Outils de performance : JMeter, Gatling, NeoLoad, LoadRunner, Performance Center · APM / Observabilité : Grafana, Kibana, Elastic Stack, Dynatrace, AppDynamics · Architectures cloud AWS : EC2, ECS/ECR, Lambda, VPC, WAF, CloudWatch, autoscaling · Architectures microservices : Kafka, API Gateway, Tomcat, PostgreSQL, Oracle… · Scripting : Python, Shell, Java / Scala · CI/CD : Jenkins, XLD/XLR, Terraform/Terragrunt Méthodologies · Agile (Scrum/Kanban) · Cycle en V · Stratégie de test · Cadrage & AMOA technique Soft skills · Capacité de pilotage · Aptitude à vulgariser les résultats techniques · Communication transverse (Dev, Ops, Réseau, Métier) · Analyse & diagnostic 4. Livrables attendus Volet Cadrage · Stratégie de tests de performance · Plans de tests détaillés · Dossier d’architecture testée · Planning des campagnes · Environnement prêt à l'exécution Volet Exécution · Scripts de test · Rapports d’exécution de campagne · Analyses détaillées et synthèses exécutives · Recommandations & plan d’action · Contribution à l’amélioration continue Environnement & outils · Jira, Confluence, Xray · Cucumber, BDD, Gherkin, Vulcain (outil interne) 🎯Votre profil Formation : Bac+5 - Master avec une spécialisation dans un secteur technique ou commercial ou un équivalent avec une école spécialisée. Expérience : · Entre 8 et 10 ans d’expérience en test de perforamnce · Votre maîtrise des standards ISTQB, votre capacité à structurer des processus robustes et votre aisance à collaborer avec des équipes pluridisciplinaires font de vous un véritable référent qualité. · Vous savez allier vision stratégique et opérationnalité, tout en accompagnant les équipes vers des pratiques plus matures. · Solide expérience du travail en environnement transverse, avec une capacité démontrée à mobiliser et influencer les équipes par l’impact et la collaboration. Langues : Français courant (C2), Anglais professionnel (B2-C1)