Trouvez votre prochaine offre d’emploi ou de mission freelance Apache Kafka

📢 Mission – Développeur Flux (Stambia / Semarchy xDI) – Lille Contexte : Nous recherchons un Développeur Flux confirmé spécialisé en Stambia / Semarchy xDI pour rejoindre une équipe Data Engineering et renforcer les capacités de conception et d’industrialisation de flux de données opérationnels (hors décisionnel). Mission : Analyse des besoins métiers en intégration de données Conception et développement de flux complexes avec Stambia / Semarchy xDI Déploiement et mise en production (Git/Gitlab, CI/CD) Développement de scripts (Python, Shell, Beanshell) pour enrichir les traitements Tests de performance et robustesse Documentation technique et partage de connaissances RUN : monitoring, support, optimisation, astreintes Environnement technique : Stambia / Semarchy xDI, PostgreSQL, Oracle, Kafka, Kafka Connect, API REST, SQL, Git/Gitlab, Datadog, Jira, Confluence, Opcon. Conditions : 📍 Localisation : Métropole lilloise 🔄 Rythme : 3 jours sur site / 2 jours télétravail 🚀 Démarrage : ASAP ⏳ Durée : 1 à 3 ans (renouvelable) 📞 Astreintes prévues

Mission Freelance - Développeur Flux Stambia / Semarchy xDI confirmé 🔎 Votre rôle : Analyser les besoins et concevoir des flux complexes avec Stambia / Semarchy xDI Développer, tester et documenter vos réalisations Contribuer à l’industrialisation des flux de données Assurer le suivi de production et participer aux astreintes 💡 Environnement technique : Stambia / Semarchy xDI, PostgreSQL, Oracle, Kafka, Kafka Connect, API REST, SQL, Git, Gitlab CI/CD, Datadog, Jira, Confluence, Opcon. 👤 Profil recherché : Expérience confirmée (3-5 ans) sur Stambia / Semarchy xDI Excellentes compétences en SQL et modélisation de données Connaissance des architectures d’échange (batch, streaming, API REST) Bonnes pratiques de développement, scripting (Python, Beanshell, Shell…) Esprit d’équipe et communication claire #DataEngineering #Stambia #SemarchyxDI #Recrutement #ETL #Data

Ops Data Lake Ops Data Lake - Aix en Provence cloud public AWS, CI/CD, gitlab pipelines, ansible, kubernetes, Helm charts, certificats SSL,, Kafka, Kafka connect, Airflow, Starburst, Control-m, Dataiku, Python, Spark, Linux Contexte de la mission Le prestataire étant orienté big data et ayant des compétences dans les domaines listés ci-dessous, le Client fait appel à l'expertise du prestataire pour l'équipe Datalake Ops : cloud public AWS, CI/CD, gitlab pipelines, ansible, kubernetes, Helm charts, certificats SSL,, Kafka, Kafka connect, Airflow, Starburst, Control-m, Dataiku, Python, Spark, Linux Objectifs et livrables En étroite collaboration avec notre profils devops AWS, l’expert technique sur le Datalake (plateforme Big Data) devra s'affranchir des mission suivantes : · Assurer le maintien en conditions opérationnelles de la plateforme Datalake cloud public AWS /privé: gestion des incidents et des demandes effectuées par les projets ou les utilisateurs finaux · Contribuer à l’implémentation/automatisation des solutions · Effectuer les actions de déploiement sur les environnements (int, preprod et prod) · Contribuer à l’amélioration continue des outils d’exploitation et de déploiement · Communication auprès des utilisateurs finaux Le Prestataire devra fournir les livrables suivants : · Récapitulatif mensuel des tickets traités (incidents, demandes de travaux, mises en production) · Statut bi-mensuel sur l’avancée des projets sur lesquels il sera contributeur

Analyse du fonctionnement actuel (AS-IS) des applications à intégrer Identification des impacts liés à l’intégration dans l’environnement SMART Définition de la cible d’intégration (TO-BE) avec les parties prenantes Rédaction des spécifications techniques des flux Réalisation ou pilotage des développements nécessaires Participation active aux phases de recette , Dry Run , Cut Over et hypercare post Go-Live Livrables attendus : Dossier d’intégration complet (AS-IS + TO-BE) Dossier technique des flux Plan de Cut Over détaillé Expertise technique confirmée sur les technologies suivantes : Exchange ESB, Kafka, API LINUX, SHELL, SQL (bases de données) Google Cloud Platform Connaissance fonctionnelle de SAP S/4HANA Retail (niveau junior accepté) Anglais professionnel impératif (contexte international) Soft skills : Autonomie et proactivité Esprit d’analyse et de synthèse Capacité à interagir avec des interlocuteurs techniques et fonctionnels variés

Développeur Java Angular Aix en Provence Fullstack Expérience souhaitée : 7 ans Angular : 3/4 ans Compétences techniques nécessaires : Développement Back-end (5 ans minimum) : Java, Quarkus Développement Front-end (mise en œuvre): Angular ou autre framework front-end CI/CD : maîtrise complète de l’un des outils (Jenkins, GIT CI/CD ou autre) Virtualisation : Environnement Kubernetes, Docker Pratiques : Clean code Compétences techniques qui seraient un avantage : Développement data : Hadoop, Spark, Kafka, Redis, Elastic Développement Back-end : Kotlin CI/CD : maîtrise des outils Jenkins ou Concourse Méthodes projet : Agilité pratiquée

📍 Localisation : Lille (3 jours sur site / 2 jours télétravail) 📅 Démarrage : ASAP – Mission de 9 mois (renouvelable) 💶 TJM : Selon profil 🎯 Contexte & Mission Le projet consiste à faire évoluer une application monolithique vers un environnement basé sur des microservices découplés et asynchrones, construits sur une architecture event-driven avec Apache Kafka comme backbone d’échange. Dans ce cadre, nous recherchons un·e Développeur·se Back-End Symfony senior pour contribuer activement à la conception, au développement et à la mise en production de ces nouveaux services distribués. 🚀 Objectifs de la mission Participer à la refonte des produits existants dans une logique de découplage technique Concevoir et développer des APIs REST robustes, maintenables et testées Collaborer étroitement avec les équipes techniques internes Contribuer aux choix d’architecture, aux revues de code et à la qualité logicielle Participer à la documentation technique et à l’industrialisation des bonnes pratiques 🛠️ Stack technique & environnement Langages & frameworks : PHP 8 / Symfony 6+, Python (bonus), NodeJS (bonus) Base de données : PostgreSQL Cloud & Data : S3, Trino, dbt, BigQuery / Snowflake CI/CD & versioning : GitHub, GitHub Actions Architecture : Microservices event-driven (Kafka) Compétences appréciées Expérience en environnement cloud ou pratiques DevOps (CI/CD, GitHub Actions) Connaissance de Python , NodeJS ou de stacks orientées data Sensibilité aux problématiques de performance et de scalabilité

Migration de serveurs CentOS vers Rocky Linux (quasiment terminé) • MCO sur la buildstack (Nexus, Harbor, Gitlab, Trivy, SonarQube) • Mise en oeuvre/MCO de pipelines de CI/CD (Gitlab) • Déploiement de serveurs et d’applications, MCO des serveurs (Terraform, Ansible, AWX) • Déploiement et au support fonctionnement de Middlewares (Kafka), logiciels de sécurité (Keycloak, Vault), logiciels de stockage objet (MinIO) • Gestion des Reverse Proxies (HA Proxy) • Métrologie (Loki, VictoriaLogs, VictoriaMetrics, Grafana, Prometheus, CheckMK, Uptime Kuma) • Déploiement, MCO de bases de données (PostgreSQL) et sauvegarde (CommVault) • Gestion des assets dans le cloud sécurisé (Bucket, Cloud Run, GKE) • Déploiement, administration et MCO du cluster Kubernetes Indus • Assistance aux équipes de dev pour conteneurisation des applis (Docker) • Rédaction de dossiers d'exploitation

Dans le cadre d’un projet stratégique lié à l’industrialisation de nouvelles lignes de production, nous recherchons un Data Engineer Sénior pour intervenir sur la conception et le développement de flux de données. La mission consiste à spécifier, développer et maintenir des pipelines d’ingestion et de transformation de données dans un environnement Big Data. Le consultant interviendra en régie, au sein d’une équipe Data pluridisciplinaire, en lien avec les équipes IT et métiers. Expérience : Minimum 2 ans en tant que Data Engineer dans des environnements Big Data

Nous recherchons un Senior Full Stack Engineer confirmé avec des compétences en Java et une capacité de coordination dans un contexte international. 🎯 Missions principales Migration d’applications C/C++ vers Java ou Python . Analyse et optimisation de pipelines ETL . Conception et développement de microservices de reporting : Extraction de données depuis Oracle, PostgreSQL, Kafka, MQ, Pub-Sub, Solace, SFTP, NAS. Transformations et enrichissements complexes. Publication en temps réel via Kafka, MQ, Pub-Sub, Solace ou bases de données. Mise en place et maintenance des pipelines CI/CD (Maven, Gradle, Jenkins, Docker, Kubernetes, Ansible). Coordination et communication avec des équipes globales (Asie, Europe, Amériques). Respect des standards de qualité, sécurité et conformité réglementaire. ✅ Compétences requises Solide expérience en Java (Streams, Lambdas, Annotations…) et Spring Boot . Bonne maîtrise des bases SQL/NoSQL (Oracle, PostgreSQL, MongoDB, Redis, Clickhouse). Expertise en messaging systems (Kafka, JMS, Solace, Pub/Sub…). Compétences DevOps & CI/CD : Maven, Gradle, Jenkins, Docker, Kubernetes, Ansible. Connaissances Cloud (GCP apprécié). Bon niveau d’anglais, écrit et oral. Capacité de coordination et communication avec des équipes internationales. ⭐ Atouts supplémentaires Expérience en Fixed Income (Rates, Credit, Bonds, IRS, CDS). Connaissance du pricing ou de la gestion des risques . Certifications Java / Cloud / DevOps. Anglais courant

🏭 Secteurs stratégiques : Banque d’investissement 🗓 Démarrage : ASAP 🤝Description détaillée Dans le cadre d'un projet au sein d'un client grand compte, nous sommes à la recherche d'un Développeur c# backend ayant pratiqué les méthodes TDD et BDD. Au sein du département informatique en charge des développements pour le bénéfice de l’ALM Treasury, nous proposons une mission de développement .Net pour contribuer au développement autour de la nouvelle plateforme orientée services (SOA) ayant comme socle Kafka et Cassandra.

Spark (spark streaming et batch), Kafka, scala, java Valeurs et Pratiques agiles ; cadre Scrum. Stack Hadoop Cloudera Hdfs, Hive, Hbase, Phoenix DEVOPS : GITLAB CI/CD, Jenkins, Artifactory, SonarQube, XL Release, ELK, Grafana … TESTS : XRAY et JUNIT, bonnes pratiques d'automatisation (Craftmanship) Compétences Humaines L'envie constante d'apprendre et de progresser Intelligence collective : Une bonne communication et l'esprit d'équipe La pugnacité nécessaire pour trouver les solutions les plus efficaces et être force de proposition 3 jours sur site/ 2 jours en TT

Ops Data Lake - Aix en Provence cloud public AWS, CI/CD, gitlab pipelines, ansible, kubernetes, Helm charts, certificats SSL,, Kafka, Kafka connect, Airflow, Starburst, Control-m, Dataiku, Python, Spark, Linux Contexte de la mission Le prestataire étant orienté big data et ayant des compétences dans les domaines listés ci-dessous, le Client fait appel à l'expertise du prestataire pour l'équipe Datalake Ops : cloud public AWS, CI/CD, gitlab pipelines, ansible, kubernetes, Helm charts, certificats SSL,, Kafka, Kafka connect, Airflow, Starburst, Control-m, Dataiku, Python, Spark, Linux Objectifs et livrables En étroite collaboration avec notre profils devops AWS, l’expert technique sur le Datalake (plateforme Big Data) devra s'affranchir des mission suivantes : · Assurer le maintien en conditions opérationnelles de la plateforme Datalake cloud public AWS /privé: gestion des incidents et des demandes effectuées par les projets ou les utilisateurs finaux · Contribuer à l’implémentation/automatisation des solutions · Effectuer les actions de déploiement sur les environnements (int, preprod et prod) · Contribuer à l’amélioration continue des outils d’exploitation et de déploiement · Communication auprès des utilisateurs finaux Le Prestataire devra fournir les livrables suivants : · Récapitulatif mensuel des tickets traités (incidents, demandes de travaux, mises en production) · Statut bi-mensuel sur l’avancée des projets sur lesquels il sera contributeur

Je recherche pour un de mes clients un Data Engineer Python x GCP : Missions principales : • Participer aux analyses, études d’impacts et cadrage techniques • Concevoir des solutions en respectant les bonnes pratiques d’architecture data et développement • Réaliser le développement de nouveaux data products et assurer la maintenance évolutive et corrective des data products existants • Rédiger la documentation technique des data products • Assurer un support aux testeurs • Reporter de ton activité à ta Squad et travailler dans une démarche d’efficacité collective Compétences techniques : • Langages de programmation : Python, Scripts Shell • Modélisation des données : Modèle Physique des Données (MPD), requêtes SQL. • Services de streaming data : Kafka • Services d’ingestion des données : Kafka Connect, SFTP • Services de stockage : GCP BigQuery, Cloud Storage, Kafka, Sharepoint • Processing : Scripts Python, GCP Dataflow, Data Build Tool (DBT) • Restitution : Looker (Dashboards, Explores de données), Fichiers de reporting (CSV, Excel) • Outils de collaboration et de CI/CD : GitLab, Flamingo • Utilisation de plateformes pour le développement et le déploiement : Docker, Kubernetes, Kustomize, Helm, Terraform • Testing : Tests avec DBT, Tests de non-régression, collaboration avec la QA. • Manipulation des formats de fichiers : CSV, JSON, Avro, XM

Vos missions ? Intégré à nos équipes sur notre Factory ou chez nos clients, vous interviendrez sur un projet de développement back-end. - Concevoir, développer et maintenir des applications en respectant les spécifications - Participer au Code Review avec les autres développeurs du projet - Ecrire de tests unitaires et fonctionnels durant vos développements - Travailler en collaboration avec une équipe agile et participer aux réunions techniques La stack technique : - Java (8/11/17) - SpringBoot - Hibernate - SQL - Microservice - Kafka - API Rest

Almatek recherche pour l'un de ses clients, Un Lead Tech Java / Apache Camel à Aix-en-Provence Contexte : dans le cadre d’un ambitieux projet de modernisation, l’ERP maison est remplacé par un ERP du marché spécialisé dans la gestion à l’affaire, nécessitant la mise en place de nombreux flux d’interfaces. Vos missions • Concevoir et développer les interfaces entre l’ERP et les applications internes • Rédiger les spécifications techniques et documenter vos choix • Développer avec Java, Spring Boot et Apache Camel • Réaliser les tests unitaires et garantir la qualité du code • Participer aux rituels Agile / Scrum et collaborer avec les équipes métier Environnement technique • Langages : Java (expert), SQL (confirmé) • Frameworks : Apache Camel, Spring Boot • Outils : Git, Jenkins, JUnit, Postman, Bitbucket, Sonarqube • Formats & Services : JSON, XML, REST, SOAP • Bonus : Kafka, MongoDB, NiFi Pourquoi nous rejoindre ? • Projet stratégique et techniquement stimulant • Profil sénior recherché, avec réelle valeur ajoutée sur l’architecture et la conception • Possibilité de formation complémentaire (Kafka, Agile) • Collaboration directe avec les équipes métier

Basée à Lille, Lyon, Nantes, Grenoble et Bruxelles, Insitoo Freelances est une société du groupe Insitoo, spécialisée dans le placement et le sourcing des Freelances IT et Métier. Depuis 2007, Insitoo Freelances a su s’imposer comme une référence en matière de freelancing par son expertise dans l’IT et ses valeurs de transparence et de proximité. Actuellement, afin de répondre aux besoins de nos clients, nous recherchons un Développeur Java Chutney (H/F) à Paris, France. Contexte : Le projet est la brique centrale par laquelle transitent toutes les informations, elle est critique et a été pensée comme un événementiel asynchrone. Il prend en charge et exécute les demandes de services, collecte les données de mesure et télé opère les équipements sur le terrain. Le produit est pris en charge par différentes équipes qui peuvent se composer d’une dizaine de personnes. Les équipes ont en charge tout le cycle de développement. Activité principale Architecture SI et contribution à la mise en œuvre des développements des applications à partir des besoins fonctionnels Conception, développement, test et maintien de l’application Responsable de l’application jusqu'à la production (surveillance, support, amélioration, …) Développement en respectant les bonnes pratiques Participation à la correction des anomalies Communication et remontée des alertes ou points de blocages aux personnes concernées Participation aux différentes réunions/ateliers de l'équipe Amélioration de l'outillage d’exploitabilité du SI : monitoring, alerting, exploitation Activité secondaire Rédaction et actualisation de documents techniques Support Réalisation de tests croisés Stack technique de l'équipe Java 8+ (ou 11) notamment la syntaxe autour des Annotations et des Lambda Expressions et de l’outillage classique. API Java : CDI, JAX-RS, JPA, JMS & EJB Runtimes/Framework suivants : WebLogic Server Utilisation de Maven, Jenkins & Ansible Spring, Git, Shell, VirtualBox, Docker Pour des développeurs Front : Angular et React Systèmes de supervision (ex. Grafana, InfluxDB, Prometheus, Collectd, Telegraf, AppDynamics, JmxTrans, Micrometer, etc…) Autres compétences demandées : Oracle, Kafka, Systèmes Unix (RHEL), Notions en sécurité (structure d’une PKI, protocole TLS) Stack Technique CHUTNEY : OrientDB, H2, PostGres, Angular 13, Kotlin 1.4, Spring-boot, Ansible, Maven, Gradle, Java 11, AMQP, HTTP, JMS, Kafka, SSH ,Selenium, Groovy, SQL, XPATH, JSONPATH