Find your next tech and IT Job or contract Apache Kafka

Anglais courant obligatoire Le posteNous recherchons un Tech Lead Java Senior hands-on, avec un équilibre entre lead technique et développement. Vous intégrerez une équipe d'environ 5 développeurs, dont une partie offshore, et travaillerez en collaboration avec l'architecte et les autres Tech Leads. Vos missionsGarantir les bonnes pratiques et la qualité technique. Accompagner et encadrer les développeurs, notamment offshore. Participer aux choix et conceptions techniques. Effectuer les revues de code et suivre les Merge Requests. Développer activement les fonctionnalités et rester hands-on. Participer à l'amélioration de la CI/CD et de l'exploitabilité. Collaborer avec les PO, architectes et équipes Ops. Environnement techniqueJava 17, Spring, JPA/Hibernate, REST, PostgreSQL, Git, Jenkins, Maven, Docker, Kubernetes, AWS. Kafka et Vue.js sont des plus. Profil recherchéSenior Java / Spring avec expérience Tech Lead. Excellente maîtrise de Java, Spring, JPA et REST. Bonne maîtrise SQL/PostgreSQL et Git. Expérience CI/CD et qualité de code. Expérience du travail avec une équipe offshore. Anglais courant écrit et oral indispensable. Maîtrise des outils d'IA pour le développement, avec idéalement une pratique concrète du développement assisté par IA dans IntelliJ. Autonome, pédagogue et capable de fédérer une équipe. Le profil idéal : un Senior Java devenu Tech Lead, qui souhaite rester fortement impliqué dans le développement.

Basée à Lille, Lyon, Nantes, Grenoble, Marseille, Paris et Bruxelles, Insitoo Freelances est une société du groupe Insitoo, spécialisée dans le placement et le sourcing des Freelances IT et Métier. Depuis 2007, Insitoo Freelances a su s'imposer comme une référence en matière de freelancing par son expertise dans l'IT et ses valeurs de transparence et de proximité. Actuellement, afin de répondre aux besoins de nos clients, nous recherchons un Developpeur back-end (H/F) à Lyon, France. Les missions attendues par le Developpeur back-end (H/F) : Vos missions Concevoir et développer les fonctionnalités back-end selon les besoins fonctionnels. Garantir la qualité du code par des tests robustes (unitaires, intégration, TDD) et l'optimisation des performances SQL. Être un appui technique au Lead Dev, participer aux revues de code et soutenir la montée en compétence de l'équipe. Rédiger la documentation technique et apporter votre support aux équipes fonctionnelles. Votre profil Séniorité confirmée en développement Back-end. Maîtrise impérative de Java 17, Spring Boot et Kafka. Solides compétences en bases de données (Oracle, optimisation SQL) et pratiques de test (TDD, Cypress). Culture Agile affirmée, force de proposition et bonnes capacités de communication. Les modalités Lieu : Lyon Télétravail : 50 % Démarrage : 2 novembre 2026 Durée : Mission longue

Nous recherchons pour une mission longue chez notre client secteur banque/finance en région parisienne un Data Architect confirmé, spécialiste Kafka. Vous renforcez une équipe support Data Analytics qui conçoit et maintient des architectures Big Data pour les besoins internes de l'entreprise. L'approche est résolument tournée vers l'automatisation, dans un environnement anglophone. Vos missions : - Apporter votre expertise Kafka sur les plateformes de l'équipe. - Assurer le support et le maintien en conditions opérationnelles des plateformes Kafka. - Automatiser le déploiement et l'exploitation avec Ansible, Git/Bitbucket et Python. - Développer des services et des intégrations via des APIs REST. - Participer aux développements de l'équipe Data Analytics autour d'OpenSearch et de la Elastic Stack (Elasticsearch, Logstash, Kibana, Beats). - Contribuer à un projet de mise à disposition de topics Kafka en libre-service (Topic As a Service). Vous rejoignez Ingéniance en CDI cadre et intégrez une communauté d'experts de la donnée, de la banque et de la finance de marché. Ref : O-FYMOP

Le contexteUn acteur majeur du secteur du voyage et de la distribution lance un nouveau projet stratégique : la construction d'un moteur de recommandation et de personnalisation destiné à proposer en temps réel, à chaque client, les offres et produits les plus pertinents selon son profil. Vous êtes le premier profil technique recruté pour poser les fondations d'une nouvelle équipe Data Engineering qui s'étoffera progressivement. Tout est à construire : l'architecture a été esquissée mais reste entièrement challengeable. Votre rôle : concevoir et bâtir de zéro la plateforme de données en streaming qui alimentera les équipes Data Science et Produit. Vos missionsConcevoir et construire from scratch le pipeline de données en streaming qui alimentera les modèles de recommandation et de personnalisation. Mettre à disposition les données en temps réel pour les équipes Data Science et les produits, avec une contrainte métier forte : un temps de réponse de l'ordre de 3 secondes entre la recherche du client et la recommandation affichée. Définir et challenger les choix d'architecture (event-driven), clarifier la stack par rapport au cadrage initial. Gérer également une partie batch pour enrichir l'historique et les profils clients. Accompagner la montée en puissance de l'équipe et jouer un rôle de référent technique. Compétences techniques requisesStreaming & temps réel (critique) Maîtrise approfondie des concepts de streaming : gestion du fenêtrage (windowing), traitement temps réel, garanties de livraison, au-delà du seul outil Kafka. Expérience solide d'une architecture event-driven. Cloud & traitement Expertise Google Cloud Platform (BigQuery notamment). Python comme langage principal. Aisance sur les pipelines batch pour l'enrichissement de données historiques. Pratiques d'ingénierie Infrastructure as Code (Terraform), CI/CD, bonnes pratiques de qualité et de documentation.

Nous recherchons un développeur full-stack afin de renforcer l'équipe de notre client qui opère dans le secteur d'assurance à Niort Les missions: Participer activement aux process d'amélioration continue au sein de la DSIM Contribuer à la diffusion et au suivi des bonnes pratiques au sein de l'ensemble des équipes de réalisation Contribuer étroitement avec le responsable de la gouvernance des projets techniques à l'élaboration des roadmaps techniques, à leur mise en place et à leur suivi Être force de proposition concernant l'amélioration des process en place Objectifs et livrablesParticiper à l'étude et à la proposition de solutions techniques Participer activement aux études d'impacts et aux chiffrages Contribuer à la stabilité et à la performance du patrimoine applicatif Réaliser des revues de code en collaboration avec l'équipe Socle IT Rédiger la documentation technique nécessaire Contribuer à l'amélioration continue

Grand groupe financier français, direction des systèmes d'information. L'équipe MTA (Modélisation et Technologies Avancées) conçoit et industrialise les composants IA utilisés par les métiers : API, chatbots internes et externes, agents IA capables d'exécuter des workflows, d'appeler des API et d'orchestrer des outils, intégration de modèles LLM (Mistral, GPT, Claude), contribution aux plateformes transverses (IALAB, IAP, GED, RPA). L'équipe veut renforcer son niveau de séniorité avec un profil expert. Objectifs et livrables Développer des agents IA avancés pour les métiers : agents capables d'appeler des API et d'exécuter des actions, scénarios multi-étapes (analyse, décision, action, supervision), tooling IA (actions, connecteurs, permissions). Concevoir ou améliorer des chatbots métiers : mémoire, récupération d'information (RAG), contextualisation, optimisation des prompts, support multi-modèles. Intégrer et orchestrer avec le SI : appels sécurisés vers les API internes (ERP, GED, RPA, CRM), exécuteurs d'outils avec gestion fine des autorisations et des logs. Industrialiser et fiabiliser : observabilité (logs, métriques, traçabilité, coûts), tests unitaires et de bout en bout, contribution aux frameworks internes. Participer aux démonstrations système, au PI planning et aux incréments agiles. Respecter les exigences SSI, DPO et gouvernance IA. Profil recherché Développeur expert en agents IA, orchestration, chatbots avancés et intégrations SI, plus senior que les profils déjà en place dans l'équipe. Python expert (FastAPI, async), très bonnes bases Node.js / TypeScript, développement API-first. Frameworks agents (LangChain, LlamaIndex, CrewAI, Semantic Kernel ou équivalents), maîtrise des LLM (Mistral, GPT, Claude), RAG, mémoire. Cloud et DevOps : Kafka, Azure Functions, conteneurs, CI/CD, approche « You build it, you run it ». Observabilité et sécurité : Grafana, Prometheus, Langfuse ; permissions d'actions, sandboxing, conformité IA. Autonomie, pédagogie auprès des métiers, documentation, esprit produit, pratique des rituels agiles. Environnement Python, Node.js / TypeScript, LangChain / LlamaIndex / CrewAI / Semantic Kernel, Mistral / GPT / Claude, Kafka, Azure Functions, conteneurs, CI/CD, Grafana, Prometheus, Langfuse. Socle on premise.

Contexte de la mission :Dans le cadre de la mise en œuvre d'un nouveau socle d'échange de données d'entreprise basé sur Apache Kafka et la distribution Confluent, nous recherchons un Expert Kafka pour renforcer une équipe projet. L'objectif est de concevoir, déployer et industrialiser une plateforme de Data Streaming capable de répondre à différents besoins d'échange, de réplication et d'intégration de données. Vous interviendrez sur les différentes phases du projet, de la conception de l'architecture à la mise en production, en passant par l'administration, l'optimisation et la sécurisation du socle technique. Missions principales : 1. Conception et mise en œuvre du socle Kafka Participer à la conception et à la mise en œuvre de l'architecture Kafka Confluent. Contribuer au déploiement et à la configuration des composants du cluster Kafka. Mettre en place et configurer les connecteurs nécessaires aux échanges de données. Participer à l'intégration de Kafka dans l'écosystème technique existant. 2. Administration et expertise technique Assurer l'administration et le maintien en conditions opérationnelles du socle Kafka. Diagnostiquer et résoudre les incidents complexes. Analyser les performances et optimiser le fonctionnement des clusters. Contribuer à l'amélioration continue de la plateforme et à sa fiabilité. 3. Scripting et automatisation Développer des scripts pour automatiser les opérations d'administration et d'exploitation. Utiliser Python, Shell et JSON pour répondre aux besoins du projet. Participer à l'automatisation des déploiements et des opérations techniques. 4. Documentation et accompagnement Rédiger la documentation technique : architecture, administration, exploitation et procédures opérationnelles. Produire un reporting régulier et assurer le suivi des activités. Participer aux réunions techniques et collaborer avec les équipes projet. Organiser des transferts de compétences auprès des équipes.

Pour un grand groupe, dans le cadre de la modernisation de son système d'information, nous recherchons un(e) Architecte Solution expérimenté(e). Vous travaillerez avec les équipes métiers, les équipes de développement et les partenaires. Missions Concevoir des architectures cible scalables, hautement disponibles et sécurisées (cloud AWS, microservices) Animer les ateliers avec les métiers et les partenaires pour définir les solutions techniques et fonctionnelles Définir et piloter les stratégies de migration vers le cloud (applications, bases de données) Concevoir les flux d'intégration : API Gateway, EAI/ESB, streaming et communication asynchrone (Kafka) Encadrer la démarche Infrastructure as Code (Terraform) et la conteneurisation (Docker) Faire valider les architectures (AWS Well-Architected Review) et garantir les exigences de sécurité et d'IAM Accompagner les équipes de développement sur les bonnes pratiques (DDD, BDD, Clean Code) et traiter les problèmes de performance

Business Analyst – Booking Post-Trade / Produits Dérivés – H/F 407 Dans le cadre d'une mission au sein d'un environnement Banque de Financement et d'Investissement / Marchés Financiers, nous recherchons un(e) Business Analyst pour intervenir sur une application de Booking Post-Trade dédiée notamment aux obligations de reporting réglementaire. Vous interviendrez sur un périmètre couvrant les produits dérivés de taux, crédit, change et options de change, dans un contexte réglementaire international : EMIR, MiFID, MMSR, CFTC, HKTR, MAS, etc. Vos principales missions : - Recueillir et analyser les besoins des utilisateurs ; - Analyser l'existant et les impacts fonctionnels ; - Définir et formaliser les solutions fonctionnelles ; - Rédiger les spécifications fonctionnelles ; - Accompagner les équipes de développement ; - Préparer et réaliser la recette avec les utilisateurs ; - Participer à la validation et à la mise en production des évolutions ; - Intervenir sur les problématiques de Booking / Post-Trade et reporting réglementaire. Compétences recherchées : - Bonne connaissance des marchés financiers et produits dérivés ; - Expérience significative en Post-Trade / Booking ; - Connaissance des réglementations EMIR / MiFID et idéalement d'autres réglementations internationales ; - Bonne culture technique et capacité à échanger avec les équipes IT ; - Connaissances de C#, architecture microservices, Kafka, OpenShift et SingleStore ; - Bon niveau d'anglais. Une expérience en environnement CIB / Global Markets constitue un réel atout.

Bonjour, Notre client, basé dans le sud de l'Île-de-France, recherche un·e Responsable Run Digital Confirmé·e pour renforcer ses équipes dans le cadre du lancement d'une nouvelle plateforme digitale. ContexteAu sein de la Direction Transformation Digitale de la DSI, vous intervenez dans le cadre du lancement d'une nouvelle plateforme digitale e-commerce comprenant notamment un PIM, un gestionnaire d'événements, un CMS et un OMS. Rattaché·e au Product Owner, vous êtes responsable de plusieurs sujets stratégiques liés au Run et à la performance de la plateforme : Gestion des demandes de services Performance et tenue à la charge Supervision et analyse des logs Suivi des erreurs côté client Missions principales1. Gestion des demandes de services Vous prenez en charge différentes demandes techniques : exports/imports, rattrapage de données via API ou traitements en masse, planification de tâches, etc. Ces interventions sont principalement réalisées sur des environnements Magento 2, AWS (S3, CloudWatch, Fargate) et/ou Kafka. Vous êtes capable d'analyser les besoins et de mettre en œuvre les solutions de manière autonome, avec réactivité et rigueur. 2. Performance et tests de charge Vous participez aux tests de performance et de charge réalisés lors des nouvelles versions de la plateforme. Vous utilisez notamment Lighthouse et JMeter, analysez les métriques obtenues et êtes force de proposition pour adapter les scénarios de test aux conditions réelles de production. 3. Logs et supervision Les logs applicatifs sont centralisés via des solutions d'APM et de monitoring telles que New Relic et/ou Datadog. Vous êtes notamment amené·e à : Analyser et interpréter les logs Créer et faire évoluer les alertes Concevoir et maintenir les dashboards Identifier les axes d'amélioration de la supervision 4. Qualité de la console client Vous assurez une veille régulière sur les erreurs remontées dans les consoles côté client. Vous travaillez avec les équipes de développement afin d'identifier, qualifier et faire corriger les erreurs susceptibles d'avoir un impact sur l'expérience des utilisateurs et des équipes internes. Environnement techniqueE-commerce / CMS : Magento 2 Cloud : AWS, S3, Fargate, CloudWatch Monitoring / APM : New Relic, Datadog, Grafana Messaging : Kafka / Confluent Ticketing : Jira Knowledge Management : Confluence Versioning : GitLab Tests de charge : JMeter Méthodologies : Agile, SAFe, DevOps N'hésitez pas à m'envoyer votre candidature.Vanessa | DUONEXT

Localisation : IDF Présence sur site : 3 jours par semaine Démarrage : ASAP Fin de mission : 04/01/2028 TJM : 630 € Expérience : Plus de 7 ans Contexte de la missionDans le cadre de l'évolution d'une plateforme Data sur GCP, vous interviendrez sur la conception et le développement de solutions visant à améliorer les pratiques d'ingénierie logicielle, l'outillage des développeurs et l'automatisation des traitements. La mission porte notamment sur le développement d'agents IA destinés à accompagner les équipes techniques dans leurs activités, avec une montée en autonomie progressive sur différents domaines de la Data Platform. Objectifs de la missionConcevoir et développer des agents IA dédiés à l'outillage des équipes de développement. Contribuer à l'automatisation des activités de conception, de développement et de mise en production. Participer à l'amélioration continue des pratiques d'ingénierie et de déploiement. Contribuer à la modernisation, à la sécurisation et à l'observabilité de la plateforme. La roadmap prévoit notamment le développement d'agents dédiés à l'outillage des développeurs (MCP, skills, cartographie des pipelines), puis leur extension à différents domaines : DBT, Kafka Streams, APIs et Dataproc, de la conception jusqu'à la mise en production, avec des mécanismes de rollback. En parallèle, les travaux se poursuivent sur la modernisation du socle, notamment les migrations, la sécurisation et l'observabilité. L'objectif principal de la mission est de concevoir et développer ces agents IA. Compétences requises – Must Have Solide expérience en ingénierie logicielle ou plateforme sur GCP, notamment sur les sujets CI/CD, tests et observabilité. Pratique du traitement batch (dbt / BigQuery) ou du streaming (Kafka). Expérience avérée dans la conception et la mise en production d'au moins un agent IA, utilisé par d'autres personnes. Compétences appréciées – Nice to Have Expérience dans la création de serveurs MCP ou l'utilisation de frameworks d'agents tels que ADK ou Claude Agent SDK. Expérience en équipe plateforme ou Developer Experience, avec des outils internes utilisés par plusieurs équipes. Expérience dans la mise en place de dispositifs d'évaluation d'agents ou de systèmes LLM.

"Au sein de l'équipe CSA (Connected Services & Applications), en tant que TPM (Technical Project Manager) vous accompagnez le client dans le pilotage des plateformes connectées associées au lancement et au suivi de nouveaux véhicules. À ce titre, vous : Pilotez plusieurs carlines à différentes étapes de leur cycle de vie : développement, intégration, validation, déploiement et suivi en production. Analysez les incidents, risques et points de blocage impactant les services connectés. Priorisez les sujets critiques et coordonnez leur résolution avec les TPM, équipes de développement, validation et opérations. Assurez le reporting projet et la communication avec les parties prenantes. Contribuez à la qualité de service et à l'amélioration continue des plateformes IoT.

Contexte Dans le cadre d'un projet de mise en œuvre d'un socle d'échange de données basé sur la technologie open source Apache Kafka, s'appuyant sur la distribution Confluent, nous recherchons un expert Kafka afin de renforcer l'équipe projet. MISSIONS Pour renforcer l'équipe projet, nous recherchons une expertise technique Kafka dans le cadre de la mise en oeuvre d'un nouveau socle Kafka Confluent. L'objectif est la mise en place d'un socle Kafka d'entreprise destiné à supporter différents cas d'usage d'échange, de réplication et d'intégration de données. Les missions porteront sur les différentes phases du projet qui ont été identifiées : Phase 1 - Mise en oeuvre du socle pilote : Cette premiere étape consiste à mettre en place un socle pilote pour alimenter un premier cas d'usage de type Plateforme Data. Les données mises à disposition de de socle seront produites par les différents socles techniques du SI, soit : SI de gestion (PostgreSQL), Hadoop (Cloudera), SID-RC (Datastage) + Teradata. Parmis les travaux identifiés à réaliser : - Installation et configuration du cluster Kafka / Confluent. - Définition et mise en œuvre des normes et standards d'exploitation. - Mise en place de l'outillage d'administration et d'exploitation; - Mise en place des mécanismes de sécurité et de gestion des habilitations en s'intégrant dans l'ecosyteme SI ; - Optimisation des performances de la plateforme. - Construction et industrialisation des processus de fabrication et d'intégration des livrables. - Mise en œuvre des workflows d'intégration et de déploiement. - Instalaltion et configuration des connecteurs producteurs et consommateurs Kafka "standard" et "spécifiques Confluent" nécessaires aux premiers cas d'usage : PostgreSQL, Hadoop (HDFS), Datastage, Teradata, autres connecteurs nécessaires au périmètre du pilote.. Une attention particulière sera portée à l'industrialisation des connecteurs, notamment : - Déclaration des nouveaux producteurs et consommateurs, - Gestion des configurations, - Initialisation et rafrachissement des données consommateurs , - Déploiement automatisé des souscriptions, - Prise en compte évolutions schémas de données par les Topics Kafka, - Automatisation des opérations récurrentes, Il conviendra également de mettre en place l'ensemble des procédures d'exploitation du socle : - Procédures d'arrêt et de relance ; - Gestion des servitudes techniques ; - Supervision et monitoring ; - Mise en place des tableaux de bord ; - Documentation d'exploitation. - Connecteurs à mettre en œuvre Phase 2 : Extension du socle : Après la validation et la livraison du socle pilote, le projet entrera dans une phase d'extension afin de construire un socle cible plus capacitif et capable d'accueillir de nouveaux cas d'usage. Les principaux cas d'usage envisagés sont : - Cas d'usage n°1 : Extension Plateforme Data + Extension du pilote initial à l'ensemble des bases de données et des usages de la Plateforme Data. - Cas d'usage n°2 : Remplacement de l'outil IBM CDC + Migration des flux actuellement gérés par IBM Change Data Capture (CDC) vers Kafka. - Cas d'usage n°3 : Remplacement des extracteurs batch + Remplacement progressif des mécanismes d'extraction batch alimentant les plateformes décisionnelles par des flux temps réel basés sur Kafka. - Cas d'usage n°4 : Réplication des bases PostgreSQL + Mise en œuvre de mécanismes de réplication et de synchronisation de bases PostgreSQL via Kafka. - Cas d'usage n°5 : Migration du socle WebMethods + Étude et mise en œuvre de la migration des échanges actuellement gérés par le socle WebMethods vers Kafka. Profil recherché : Nous recherchons un expert Kafka / Confluent capable de participer à l'ensemble des phases du projet et d'accompagner l'équipe sur les sujets suivants : - Architecture Kafka et Confluent ; - Installation et administration de plateformes Kafka ; - Sécurisation des échanges ; - Performance et tuning ; - Mise en œuvre de connecteurs Kafka Connect ; - Industrialisation et automatisation des déploiements ; - Supervision et exploitation ; - Accompagnement des équipes projet et transfert de compétences. - Rédaction de dossiers d'architecture, de normes et bonnes pratiques, de dossiers d'exploitation, ...; L'expert intégrera l'équipe projet pour contribuer à la conception, à la mise en œuvre et à l'industrialisation du futur socle d'échange de données de l'entreprise. Environnement technique - technologique Environnement Socle Kafka : - Distribution Kafka Confluent et Strimzy - Langages de scripting et de developpement : Shell, Python, Json, - Systeme d'exploitation : Linux Redhat Autres environnements techniques: - Base de données : PostgreSQL - Hadoop : Cloudera - Data Streaming : IBM Infosphere CdC - Socle technique infrastructure : Kubernetes, Ansible, Linux RedHat, Vmware - Exploitation: : ordonnanceur IWS, sauvegarde HDPS, supervision Prometheus / Grafana, Competences Techniques Distribution "Kafka Confluent / IBM" : composant du cluster kafka (Broker, Kraft, Cwork) , Scema registry, Connecteurs (JDBC, Debezium PgSQL, HDFS, ...) Distribution Autres : "Kafka Strimzi", connecteurs propriétaires (exemple : "Datastage") ou outillage complémentaire Langages de scripting et de developpement : Shell, Python, Json Infrastructure et Système d'exploitation : Linux, Kubernetes, Ansible Outils connexes : ETL Datastage, Power-BI, SAS, Teradata, PostgreSQL, Data streaming, Hadoop Savoir Faire et savoir-être Capacités rédactionnelles : documentation technique, cahier des charges, communication et compte-rendu Communication et Capacités relationnelles(sens de l'écoute et du dialogue, conduite de réunion, négociation) Autonomie Capacité à travailler en équipe Esprit d'analyse et de synthèse

MissionsAlignement stratégique & métier • Définition de la vision de la solution : traduction des objectifs business en un périmètre de définition de la trajectoire architecturale (court et long terme). • Compréhension des objectifs métier : collaboration avec les Product Owners, Business Analysts et la Direction pour le recueil des exigences fonctionnelles et non fonctionnelles, des indicateurs clés (KPIs) et des attentes de ROI. • Identification des opportunités : identification des lacunes, des technologies émergentes et des axes d'innovation susceptibles de créer un avantage concurrentiel ou des gains d'efficacité. Conception et architecture de la solution • Contribution à la conception du blueprint : élaboration de modèles logiques, physiques et de données, des schémas d'intégration, des modèles de sécurité et des topologies de déploiement. • Choix technologique : évaluation et recommandation de plateformes, frameworks, services (on prem, cloud, hybride) en fonction de la pertinence fonctionnelle, du coût, de la scalabilité, de la conformité et du risque de verrouillage propriétaire. • Définition des standards : établissement et garantie du respect des normes, des architectures de référence, des bonnes pratiques et des politiques de gouvernance technique. Expertise technique & collaboration transversale • Travail en équipe multidisciplinaire : collaboration étroite avec les développeurs, DevOps, QA, ingénieurs data, designers UX/UI et les équipes d'exploitation tout au long du cycle de vie du projet. • PoC & prototypage : pilotage des preuves de concept afin de la validation des hypothèses, du test de la viabilité technologique et l'atténuation des risques critiques. • Soutien technique aux équipes : accompagnement des équipes de développement sur les principes d'architecture, les patterns de conception et les standards de qualité ; promotion d'une culture d'apprentissage continu. Pilotage de la mise en œuvre • Suivi de la livraison : apport d'un soutien technique pendant les phases de réalisation pour la garantie du respect de l'architecture définie, des objectifs de performance et des exigences de sécurité. • Résolution d'incidents : rôle de point d'escalade pour les problèmes techniques complexes, contribution à l'établissement de la cause des incidents de productions et proposition d'actions correctives. • Gestion du changement : évaluation de l'impact des demandes de modification, mise à jour des artefacts architecturaux et coordination avec les instances de contrôle des changements. Gouvernance, sécurité et conformité • Gestion des risques : identification des risques architecturaux (sécurité, confidentialité, scalabilité…) et conception de stratégies d'atténuation. • Conformité réglementaire : garantie du respect du GAFI, FATF, 5-AMLD, EU AML D, US-Patriot Act, RGPD, ISO-27001, etc. Intégration des exigences de reporting (SAR, CTR) dans les pipelines. • Maintien et mise à jour des supports documentaires : maintien des diagrammes d'architecture (C4, ArchiMate), de la documentation des décisions techniques et rédaction des manuels d'opération et registres de conformité. Performance, suivi et optimisation • Planification de capacité : modélisation et prévision de l'usage des ressources ; conception d'architectures évolutives. • Stratégie d'observabilité : définition des métriques, logs, traces et alarmes nécessaires (détection de faux positifs, taux de couverture AML) et techniques (latence de pipeline, taux d'erreur). Implémentation d'un monitoring proactif (PagerDuty, OpsGenie). • Amélioration continue : analyse des données de production, conduite de revues post implémentation et proposition de refontes ou optimisations (répartition de partitions Kafka, redesign du data model, migration vers un set-up serverless).

Nous recherchons un(e) Tech Lead Cloudera - freelance pour rejoindre une entreprise d'envergure internationale dans le cadre de l'amélioration de ses environnements Big Data. Basé(e) à Toulouse, vous interviendrez en tant que référent technique sur le socle Big Data afin de garantir son bon fonctionnement et d'accompagner ses évolutions. Vos responsabilités : Veiller à la disponibilité, à la fiabilité et à la performance du socle Big Data. Assurer le support de niveau 2 et garantir l'efficacité des procédures de reprise. Analyser les demandes d'évolution et rédiger les dossiers techniques : analyses d'impact, procédures de mise en production, recettes. Concevoir des solutions techniques complexes, ou y contribuer, et accompagner les phases de pilote, l'industrialisation et la montée en compétences. Réaliser les tests d'assemblage, les recettes d'exploitabilité et les intégrations. Industrialiser les solutions et définir les règles d'exploitation. Jouer un rôle de référent auprès des équipes internes et externes, et animer la communication en amont et en aval avec les architectes et les exploitants. Veiller au respect des normes, standards et bonnes pratiques. Assurer une veille technologique régulière et participer à l'amélioration continue.

Missions • Intégrer de nouvelles sources de données et mettre en oeuvre les flux d'ingestion vers OpenSearch et Dynatrace. • Accompagner les projets dans l'intégration de leurs données au sein de la plateforme. • Concevoir, mettre en oeuvre et faire évoluer les pipelines d'ingestion. • Assurer le maintien en condition opérationnelle des chaînes de collecte et de traitement. • Analyser et résoudre les incidents liés à l'ingestion des données. • Optimiser les performances des flux Kafka et des pipelines Logstash. • Accompagner les équipes sur la gestion des index et des données dans OpenSearch. • Utiliser les outils d'automatisation existants basés sur Ansible / AWX. • Produire la documentation technique et assurer le transfert de compétences. Compétences techniques attendues • Consultant expérimenté, autonome et immédiatement opérationnel. • Capable d'évoluer dans un environnement technique complexe. • Bon relationnel et aptitude à collaborer avec différentes équipes projets. • Esprit d'analyse et capacité à proposer des solutions adaptées aux besoins exprimés. • Kafka. • Ansible / AWX. • Python Points clés de la mission • Forte composante expertise Logstash et OpenSearch. • Intervention sur l'ensemble de la chaîne d'ingestion et d'indexation des données. • Accompagnement des équipes projets. • Sujets de performance, fiabilité et industrialisation des flux de données. • Mission nécessitant une prise en main rapide et un haut niveau d'autonomie.