Trouvez votre prochaine offre d’emploi ou de mission freelance Apache Kafka

Au sein d'une équipe spécialisée en Data et Intelligence Artificielle, vous intervenez sur des problématiques à forte dimension technique autour de la gestion de données, de l'Information Retrieval et de l'IA générative. Votre mission consiste à concevoir et industrialiser les pipelines permettant de collecter, transformer, indexer et rechercher de grands volumes de données, afin d'alimenter des applications basées sur les LLM et les architectures RAG. Vous serez également impliqué dans les choix d'architecture, l'amélioration de la pertinence des recherches et l'industrialisation des solutions en production. Vos principales missions Data Engineering & Indexation Concevoir et industrialiser des pipelines d'ingestion de données provenant de sources hétérogènes. Mettre en œuvre les traitements de parsing, nettoyage, normalisation et chunking. Concevoir et maintenir des systèmes d'indexation à grande échelle. Mettre en œuvre des bases vectorielles et des embeddings. Garantir la qualité, la fraîcheur, la traçabilité et la scalabilité des données et des index. Retrieval & RAG Concevoir des stratégies de recherche sémantique et hybride. Combiner recherche lexicale (BM25), embeddings, filtrage et reranking. Mettre en place des indicateurs de pertinence : Recall, Precision, nDCG, MRR. Optimiser les mécanismes de Retrieval alimentant les LLM et architectures RAG. Travailler sur la gestion du contexte, la déduplication et la qualité des résultats. Architecture & qualité Participer aux choix techniques et à l'évolution de la stack Data/IA. Mettre en place les bonnes pratiques de développement : Clean Code, SOLID, tests automatisés. Assurer l'observabilité des pipelines et des services. Contribuer à la sécurité et à la conformité des données. Accompagner techniquement les équipes et partager les bonnes pratiques. Environnement technique Indispensable : Python 3.11+ Data Engineering / Information Retrieval Embeddings / NLP Recherche sémantique et hybride RAG / LLM Bases vectorielles : Qdrant, Weaviate, pgvector, OpenSearch PostgreSQL Tests avec Pytest Environnement apprécié : LangChain OpenAI, Mistral, Amazon Bedrock BM25 / reranking Kafka Redis Airflow / Spark Docker / Kubernetes CI/CD Go ou Java

Dans le cadre d'un projet stratégique autour d'une plateforme de données cloud, le client recherche un Data Engineer confirmé capable de concevoir, industrialiser et maintenir des pipelines de données sécurisés. Le consultant rejoindra une équipe Data travaillant en interaction avec les équipes Architecture, DevOps et Sécurité. Missions principalesConcevoir et optimiser des pipelines ETL / ELT. Mettre en œuvre des flux CDC (Change Data Capture). Intégrer et alimenter les données dans Snowflake. Développer et industrialiser les traitements de données. Automatiser les déploiements via des chaînes CI/CD. Garantir la qualité, la performance et la sécurité des données. Participer aux échanges avec les équipes métiers et techniques. Contribuer à l'évolution de la plateforme Data Cloud. Compétences indispensablesSnowflake AWS (S3, Kinesis, IAM) SQL avancé ETL / ELT DBT CDC (idéalement Debezium) MariaDB ou base relationnelle équivalente Git / CI-CD Agile Scrum Anglais professionnel Compétences appréciéesAWS Glue Terraform / Infrastructure as Code Kafka DataOps / DevOps Sécurité des données Environnements réglementés (PCI-DSS) Outils IA de développement (GitHub Copilot, Agentic Coding) Profil recherchéBac+5 ou diplôme d'ingénieur. Minimum 3 à 5 ans d'expérience en Data Engineering. Forte maîtrise des environnements Cloud AWS. Expérience significative sur Snowflake. Autonome, rigoureux et force de proposition. Capable d'intervenir sur l'ensemble de la chaîne de valeur Data.

Chaque moment compte. Surtout ceux que vous vivez à fond. Bienvenue chez Consort Group. Consort Group, accompagne depuis plus de 30 ans les entreprises dans la valorisation de leurs données et infrastructures. Elle s'appuie sur deux leaders, Consortis et Consortia, et place l'humain et la responsabilité sociétale au cœur de ses valeurs. C'est votre future équipe Les équipes de ConsortIA, sont des acteurs de référence de la Data, du Développement Digital et de l'Ingénierie Média. En combinant ces expertises, nous concevons des systèmes d'information augmentés, intégrés, agiles et sécurisés, au service de la performance et de la transformation numérique de nos clients. Chef de projet MOE / Tech Lead Java Angular H/F C'est votre mission Vous êtes passionné·e par le développement fullstack Java/Angular, la conception de solutions et l'accompagnement des équipes techniques ? Ce poste est fait pour vous. En tant que Chef de projet MOE / Tech Lead Java Angular, vous êtes responsable de la conception technico-fonctionnelle, du développement et de la qualité des solutions, tout en assurant le lien entre les métiers et les équipes techniques. Vous intervenez au sein de squads en charge de produits dans le domaine Assurance, Fiscalité et Patrimoine, avec un rôle à la fois technique, fonctionnel et fédérateur. La mission couvre l'ensemble du cycle de vie des produits, de l'analyse des besoins à la mise en production. Côté build : Analyser les besoins métiers et participer à la conception de solutions technico-fonctionnelles adaptées Concevoir et superviser les architectures applicatives et techniques Estimer les charges et contribuer au cadrage des évolutions et projets Développer des solutions fullstack en Java/Angular, notamment sur des architectures microservices et des traitements batch Participer aux choix technologiques et garantir leur cohérence avec le cadre technique Accompagner les équipes dans la mise en œuvre des bonnes pratiques de développement : TDD, Clean Code, Code Review, Pair Programming Contribuer aux problématiques de Data et aux projets de migration ou de modernisation technologique Accompagner les développeurs dans leur montée en compétences et partager les bonnes pratiques Côté run : Accompagner et suivre les mises en production des applications Participer au suivi et à la résolution des incidents en collaboration avec les équipes Ops et les différentes squads Faciliter les échanges entre les développeurs, les Ops, les métiers, les managers et les communautés d'experts Contribuer à l'amélioration continue de la qualité, de la sécurité et de la performance logicielle Participer au suivi des applications et aux problématiques de supervision et de monitoring Contribuer à la coordination technique avec les équipes support et partenaires Participer aux rituels Agiles, à l'assistance et au suivi de production Le poste implique également une interaction régulière avec les métiers, les autres équipes IT et les équipes d'exploitation. C'est votre parcours Vous avez au moins 5 ans d'expérience en tant que Solution Analyst, Tech Lead ou sur un rôle similaire, dans des environnements de développement exigeants. Vous disposez d'une solide expérience en développement Fullstack Java/Angular et savez intervenir aussi bien sur les sujets techniques que fonctionnels. Vous aimez faire le lien entre les métiers et les équipes de développement, accompagner les équipes et faire avancer les projets, sans jamais cesser d'améliorer les pratiques. Vous êtes à l'aise dans un environnement Agile, savez communiquer avec différents interlocuteurs et faites preuve d'une bonne capacité d'adaptation. C'est votre expertise : Java / JEE, Spring, Spring Boot, Spring Batch Angular et technologies Web : HTTP, REST, OAuth2, OpenID Connect Architecture microservices, conteneurisation et Docker / Kubernetes CI/CD, GitLab / GitLab CI et pratiques DevOps Kafka, PostgreSQL et solutions de monitoring : Dynatrace, ELK, Grafana TDD, Clean Code, SonarQube, Code Review et Pair Programming Conception technico-fonctionnelle, estimation de charges et accompagnement des choix techniques Une expérience des traitements batch Java est indispensable. C'est votre manière de faire équipe : Leadership technique : vous savez guider une équipe et accompagner les développeurs dans leur progression Pédagogie et transmission : vous aimez partager vos connaissances et faire grandir les pratiques de l'équipe Communication : vous êtes à l'aise pour échanger avec les métiers, les développeurs, les Ops et les différents interlocuteurs projet Esprit collaboratif : vous savez faciliter les échanges et fédérer les différentes parties prenantes Autonomie et capacité d'adaptation : vous êtes capable d'intervenir sur des sujets variés et plusieurs squads/projets Sens de la qualité : vous êtes attentif·ve à la qualité, à la sécurité et à l'amélioration continue C'est notre engagement Chez Consort Group, vous êtes un·e expert·e qu'on accompagne pour que chaque mission devienne une étape qui compte. Un onboarding attentif et humain Une vraie proximité managériale Des formations accessibles en continu Des engagements concrets : inclusion, égalité, solidarité Un package RH complet : mutuelle, carte TR, CSE, prévoyance Une culture du feedback et des projets qui font sens C'est clair Le process de recrutement : Un premier échange téléphonique avec notre team recrutement Un entretien RH ainsi qu'un échange métier avec un.e ingénieur.e d'affaires Un test ou un échange technique avec un.e de nos expert.es Un dernier point avec votre futur.e manager ou responsable de mission Et si on se reconnaît : on démarre ensemble C'est bon à savoir Lieu : Paris Contrat : CDI Télétravail : Hybride – présence sur site 3 jours par semaine Salaire : De 58 K€ à 63 K€ (selon expérience) brut annuel Famille métier : Java / Angular / Microservices / DevOps / Data Ce que vous ferez ici, vous ne le ferez nulle part ailleurs. Ce moment, c'est le vôtre.

Développeur Full Stack JAVA (H/F) Missions principales : Au sein de cette équipe, vous serez amené à : § Participer activement aux cérémonies et pratiques Agile. § Concevoir, développer, tester, déployer et superviser des applications principalement en Java 8. § Maintenir et faire évoluer des APIs développées en Scala ainsi que des interfaces frontend basées sur Dojo. § Contribuer à la modernisation progressive du patrimoine applicatif. § Développer une expertise fonctionnelle et technique sur des périmètres stratégiques du domaine. § Participer à l'intégration de nouvelles solutions et architectures. § Utiliser quotidiennement des solutions d'intelligence artificielle (MIA, Claude, etc.) pour améliorer la qualité, la maintenabilité et la productivité du développement. § Réaliser et maintenir des tests automatisés en scala avec Playwright. § Participer à la communauté des développeurs afin de partager les bonnes pratiques et les retours d'expérience. § Accompagner la montée en compétences de vos collègues à travers le pair programming, les revues de code et le partage de connaissances. Compétences recherchées : Front-End Indispensables : § Maîtrise de HTML, CSS et JavaScript. § Capacité à consommer et intégrer des API REST. Back-End Indispensables : § Excellente maîtrise de la programmation orientée objet (Java 8 et +). § Expérience des bases de données relationnelles, idéalement DB2. § Connaissance de la conception et du développement d'API REST. Appréciés : § Connaissance de la programmation fonctionnelle (Scala). § Expérience dans la maintenance de traitements asynchrones Bash. § Expérience avec les bases de données NoSQL (MongoDB). § Connaissance du langage COBOL (maintenances d'applications migrées vers Java). § Expérience des architectures événementielles et de Kafka. § Utilisation du standard JSON : API.