Trouvez votre prochaine offre d’emploi ou de mission freelance Apache

L'équipe Data Craft recherche un Data & Analytics Engineer expérimenté pour contribuer à la conception, l'évolution et l'automatisation des chaînes de traitement de données au sein de l'écosystème Data, sous la coordination du responsable de l'équipe Data Craft. Mission et compétences requises Mission : construire des pipelines d'ingestion et de transformation de données complexes et/ou volumineuses afin de mettre à disposition des tables à destination des utilisateurs de la Self-BI, qui les exploiteront dans Power BI. La mission ne porte pas sur l'utilisation de Power BI ni sur la création de rapports. Le titulaire devra respecter les principes d'urbanisme de la Data Platform (conventions de nommage, nomenclature, ségrégation des droits et des environnements…) et implémenter efficacement les bonnes pratiques Snowflake et SQL pour exploiter des données volumineuses (jusqu'à des dizaines de milliards de lignes) : expressions régulières, agrégations et fenêtrages, opérations géospatiales, opérations statistiques…

Contexte Profil : Ingénieur de développement ou analyse programmation en environnement Big Data Niveau : Niveau 3 – plus de 6 ans d'expérience La mission porte sur la contribution au développement des évolutions de l'application Datalake, dans le cadre des projets en cours. 1 profil est recherché : Ingénieur de développement ou analyse programmation en environnement Big Data. Missions Contribution à la conception : Analyser les spécifications fonctionnelles fournies par la maîtrise d'ouvrage ; Analyser et formaliser les impacts applicatifs. Prise en charge des développements : Rédiger les spécifications techniques ; Collaborer avec les autres développeurs de l'équipe ; Réaliser les développements en Spark / Scala et/ou Java ; Réaliser les tests et les livraisons. Le consultant assurera également : Le suivi des anomalies ; Le support en cas d'incidents ; La coordination avec la direction technique Compétences comportementales Esprit d'équipe, compte tenu des nombreuses interactions avec les différentes entités de l'hébergeur et les équipes ; Engagement important, les projets Data étant soumis à de fortes attentes des clients .

Dans le cadre du renforcement de ses équipes Data Platform / Data Factory, recherche un Data Engineer expérimenté pour intervenir sur ses projets Data. Le consultant intégrera un environnement Data en croissance, avec des enjeux d'industrialisation, de performance, de qualité et de gouvernance de la donnée. Missions principales Concevoir, développer et maintenir des pipelines de données. Assurer l'ingestion, la transformation et la mise à disposition des données. Développer et industrialiser les traitements Data sous Databricks / Spark. Participer à l'évolution de la Data Platform Azure. Optimiser les traitements et les performances des pipelines. Travailler sur la qualité, la fiabilité et la disponibilité des données. Participer aux problématiques de traitement batch et/ou temps réel. Contribuer aux bonnes pratiques de développement et d'industrialisation Data. Collaborer avec les équipes Data Platform, Data Engineering, Data Science et les équipes métiers. Contribuer aux enjeux de gouvernance et de sécurisation des données. Avec un écosystème Data Platform comprenant également des enjeux autour de Databricks Unity Catalog, notamment pour la gouvernance, le lineage et la gestion des accès.

Contexte Le projet vise à mettre en place une solution permettant d'ingérer, agréger et exposer des données issues de sources multiples, afin de produire les rapports métiers nécessaires à la surveillance du risque de crédit. La solution est développée sur Google Cloud Platform (GCP) au sein d'une équipe expérimentée, sur un projet à forts enjeux et à forte visibilité. Une expérience dans le domaine du risque de crédit est appréciée. Missions principales Le consultant interviendra notamment sur : La conception et le développement de solutions Data sur Google Cloud Platform ; Le développement et l'intégration de traitements Python / Spark ; La mise en place et l'évolution des pipelines d'ingestion et de traitement de données ; L'ingestion, l'agrégation et l'exposition de données provenant de sources multiples ; Le développement de traitements à forte volumétrie ; La collecte, le stockage et l'exploitation des flux de données ; La supervision et l'intégration de données de différentes natures ; Le contrôle de la qualité et de la sécurité des données ; La maintenance et le suivi du RUN des applications développées ; La maintenance des infrastructures Data associées ; La documentation et la cartographie des différentes sources de données ; La contribution à l'industrialisation des traitements et modèles ; La proposition d'évolutions des infrastructures et solutions Data existantes. La mission rattache également au rôle de Data Engineer la structuration des bases, la gestion des métadonnées et référentiels, l'industrialisation des modèles ML ainsi que leur maintien en RUN.

Le bénéficiaire souhaite une prestation d'accompagnement dans l'objectif d'assurer une mission dans le cadre de notre transition vers une architecture Data Mesh. Nous recherchons un(e) Data Product Engineer spécialisé(e) dans le développement de pipelines sur la plateforme Talend Real Time BigData et de data products sur la plateforme Starburst. Votre mission sera de concevoir, collecter, intégrer, construire et opérer des jeux de données fiables, auto-descriptifs et interopérables, en collaboration avec les domain métiers et les data owners. Missions clés : - Conception de flux de données et de Data Products Développement des pipelines d'intégration de données optimisés via la Talend Data Fabric / Talend Real Time BigData ou encore Spark / Astronomer Documentation des pipelines d'ingestion de données Intégration des données dans l'écosystème Data Mesh Collaboration avec les domaines métiers pour identifier les sources de données et les cas d'usage. Développement des data products / data sets (vues & vues matérialisées) répondant à des cas d'usage identifiées avec les responsables de domaines métiers Développement des requêtes SQL optimisées pour Starburst (push-down predicates, partitionnement, formats de fichiers comme Iceberg/Parquet). Documentation les data products (métadonnées, ownership, qualité) Contribution à l'amélioration continue des data produts dans de la plateforme Starburst Mise en place des alertes et des dashboards pour le suivi des data products.

Je recherche un Ingénieur Big Data Hadoop / Cloudera CDP pour intervenir sur la construction, l'administration et l'évolution de plateformes Hadoop dans un contexte Agile et DevOps. Votre missionVous souhaitez évoluer au sein d'un environnement Big Data de grande envergure et contribuer à l'évolution de plateformes stratégiques ? Vous participerez également à l'amélioration des Data Services et serez force de proposition sur les évolutions techniques et les bonnes pratiques. Vos principales responsabilitésDéployer et installer des clusters Hadoop Cloudera CDP. Administrer et maintenir les plateformes Big Data en production. Installer, configurer et faire évoluer les composants Hadoop. Réaliser les montées de version des distributions et composants. Assurer le monitoring, la supervision et l'optimisation des clusters. Gérer la sécurité des plateformes (Kerberos, Ranger/Sentry, gestion des accès). Mettre en place les environnements de développement, recette et test. Assurer le support technique de niveau N2/N3. Automatiser les déploiements via Ansible, Jenkins et les outils CI/CD. Participer à l'amélioration continue des plateformes et aux projets d'évolution. Environnement techniqueBig Data Cloudera Data Platform (CDP) Hadoop HDFS Spark Hive Kafka ZooKeeper Hue Anaconda Administration & Sécurité Cloudera Manager Ambari Kerberos Ranger / Sentry Linux (RedHat, CentOS) DevOps Jenkins Ansible Git CI/CD Méthodologies Agile Scrum SAFe Kanban DevOps Profil recherchéVous justifiez d'une expérience significative dans l'administration de plateformes Big Data et maîtrisez les environnements Hadoop. Vous possédez notamment : Une solide expérience sur Cloudera CDP. Une bonne maîtrise de l'administration de clusters Hadoop. Une expérience des installations, upgrades et migrations de plateformes. Une bonne connaissance des problématiques de sécurité (Kerberos, Ranger/Sentry). Une expérience des outils d'automatisation et de CI/CD. Une excellente maîtrise des environnements Linux. Les qualités qui feront la différenceEsprit d'analyse et de synthèse. Autonomie et sens des responsabilités. Curiosité technique et veille technologique. Force de proposition. Excellent relationnel et goût du travail en équipe. Anglais professionnel. Pourquoi rejoindre mon client ?Des projets Big Data à forte valeur ajoutée. Un environnement technique stimulant. Des technologies de pointe. Une équipe experte et collaborative. Une culture orientée innovation et amélioration continue. Vous souhaitez relever ce défi ? Envoyez-nous votre CV et échangeons sur votre prochain projet !

Chers consultants, Nous recherchons, pour notre client du secteur de l'assurance basé à Niort, un ⭐ Développeur Senior/Tech Lead Java maîtrisant également Scala et Kafka ⭐ - Il faut pouvoir se rendre sur site 2 fois par semaine à Niort - Minimum 8 ans d'expérience Chers consultants, Nous recherchons, pour notre client du secteur de l'assurance basé à Niort, un ⭐ Développeur Senior/Tech Lead Java maîtrisant également Scala et Kafka ⭐ - Il faut pouvoir se rendre sur site 2 fois par semaine à Niort - Minimum 8 ans d'expérience

Contexte : Pour le compte d'un grand acteur de l'assurance qui fait évoluer ses flux et plateformes Data vers de nouvelles cibles technologiques, nous recherchons un expert Data Informatica / DBT. Il rejoindra une équipe en charge des traitements batch et de la médiation de données, avec un triple rôle : référent technique, architecte de solution Data et coordinateur des travaux de transformation. Objectifs : Accompagner la modernisation du patrimoine décisionnel et Data Sécuriser les choix d'architecture et les trajectoires de migration Garantir la cohérence technique du socle Data et des flux Diffuser les bonnes pratiques de développement, d'industrialisation et d'exploitation Missions principales : Être le référent technologique du socle Data Réaliser les études techniques et produire les dossiers d'architecture Coordonner les échanges avec les architectes, experts, équipes infrastructure, observabilité et sécurité Présenter les dossiers en comités d'architecture et instances de gouvernance Identifier les risques, proposer des solutions et accompagner leur mise en œuvre Compétences requises : Informatica et/ou DBT : Expert Kafka, Oracle, PostgreSQL Architecture applicative et architecture de données Chaînes ETL/ELT, architectures Data Cloud, Event Streaming CI/CD, Unix/Linux, ordonnanceurs et exploitation des flux Pilotage de projets techniques, animation d'ateliers, documentation d'architecture

Basée à Lille, Lyon, Nantes, Grenoble, Marseille, Paris et Bruxelles, Insitoo Freelances est une société du groupe Insitoo, spécialisée dans le placement et le sourcing des Freelances IT et Métier. Depuis 2007, Insitoo Freelances a su s'imposer comme une référence en matière de freelancing par son expertise dans l'IT et ses valeurs de transparence et de proximité. Actuellement, afin de répondre aux besoins de nos clients, nous recherchons un Developpeur back-end (H/F) à Lyon, France. Les missions attendues par le Developpeur back-end (H/F) : Vos missions Concevoir et développer les fonctionnalités back-end selon les besoins fonctionnels. Garantir la qualité du code par des tests robustes (unitaires, intégration, TDD) et l'optimisation des performances SQL. Être un appui technique au Lead Dev, participer aux revues de code et soutenir la montée en compétence de l'équipe. Rédiger la documentation technique et apporter votre support aux équipes fonctionnelles. Votre profil Séniorité confirmée en développement Back-end. Maîtrise impérative de Java 17, Spring Boot et Kafka. Solides compétences en bases de données (Oracle, optimisation SQL) et pratiques de test (TDD, Cypress). Culture Agile affirmée, force de proposition et bonnes capacités de communication. Les modalités Lieu : Lyon Télétravail : 50 % Démarrage : 2 novembre 2026 Durée : Mission longue

Vous aimez les plateformes de données qui tournent vraiment en production ? Rejoignez l'équipe qui fait vivre le datalake des fonctions Technologies & Opérations d'un grand groupe bancaire. La DSI fournit aux directions technologiques, aux opérations et à la banque de proximité les applications et les données dont elles ont besoin au quotidien. Le datalake Hadoop en est une pièce centrale : il alimente le pilotage et les usages analytiques de plusieurs directions. Vous intervenez en lien direct avec la production applicative et l'équipe DevOps, au sein d'une équipe IT internationale. Vos principales missions : Concevoir et mettre en production de nouvelles ingestions de données : collecte, préparation, transformation. Maintenir et faire évoluer les outils de gestion des pipelines de données (PySpark, shell scripting). Porter auprès de l'équipe DevOps les évolutions nécessaires de la plateforme. Rédiger des spécifications techniques claires et exploitables par l'équipe. Ce que la mission vous apporte : Un datalake en production, avec de vrais volumes et de vrais utilisateurs métier. Une équipe internationale : l'anglais est utilisé au quotidien. Une ouverture vers le cloud (GCP / BigQuery) pour qui veut élargir sa stack. Environnement technique : Hadoop, PySpark, Spark, Hive, Python, SQL, Git, Jenkins, Jira, Unix / Linux — Scrum.

Développeur Back confirmé/senior pour une mission chez un acteur majeur du secteur jeux/paris en ligne (patrimoine desktop & mobile à fort trafic). 🔧 Stack : Java 21+, Spring Boot/Cloud, Kafka, Redis, AWS, API REST, Spark/Scala (un plus) 📍Localisation: Clichy + 2 TT ⏰ Démarrage : Asap ✅ Poste CDI & Collaboration freelance possible Les missions Concevoir des solutions techniques en réponse aux besoins métiers Développer du code robuste, performant et maintenable Participer à la définition et à l'évolution de l'architecture et la reduction de la dette technique Travailler sur les sujets de performance et de sécurité Participer au maintien en condition opérationnelle et à la résolution des incidents de production Collaborer avec les architectes et contribuer aux roadmaps produit 💡 Ce qui rend le poste intéressant Vous intervenez sur des sujets où le backend, la data, l'architecture et les problématiques de performance à fort trafic se rencontrent. Cote JAVA cela demande une solide experience sur les architectures microservices ou hexagonales

Recherche 2 Développeurs Java Crédit Habitat P2F - Senior chez CATS à Lyon - BPM002996 Tâches - Production, du code, des test et livraison des codes confiés dans le respect des standrard de qualité et sécurité CA-TS. - Elaboration des scénario et solution d'implémentation sur le périmètre dans le respect du cadre d'architecture et des normes et process CA-TS - Production des product baklog, des user stories, des features, des stratégies de test et cahier de recette - Validation Technique et metier - Maintenance corrective et evolution sur le périmètre confié - Mise à jour des documentations inhérentes selon le référentiel documentaire attendus dans le CVP CATS. Contexte Intervention dans le cadre du programme de modernisation Loan IT : Développeur WEB Sénior Dans l'environnement OPEN CATS. En cycle Agile - Participation aux instances agiles : daily, cérémonies, rétrospectives, poker planning, ateliers cadrage 360. Attendu Dans le cadre d'un engagement de moyen, les livrables fournis seront en accord avec les contraintes projet Stack java 21 springboot API REST maven

Au sein du Security Operations Center (SOC) d'un grand compte, nous recherchons un Data Scientist spécialisé en cybersécurité pour renforcer les capacités de détection des menaces par l'exploitation avancée des données de sécurité. Le consultant interviendra notamment sur : ▪ La conception et le développement de modèles de détection d'anomalies sur les journaux de sécurité (logs réseau, systèmes, applicatifs) ▪ La mise en œuvre de l'analyse comportementale des utilisateurs et des entités (UEBA) : détection des comportements déviants, compromissions de comptes ▪ Le développement de modèles de scoring et de priorisation des alertes afin de réduire le bruit et les faux positifs ▪ L'analyse des jeux de données de sécurité et l'ingénierie des caractéristiques (feature engineering) sur des données massives et déséquilibrées ▪ L'évaluation rigoureuse des modèles : métriques adaptées à la détection (précision, rappel, taux de faux positifs), analyse des erreurs ▪ L'industrialisation et le monitoring des modèles en production, en lien avec les équipes SOC ▪ La collaboration avec les analystes sécurité pour qualifier les détections et enrichir les modèles

Contexte Contexte de la mission Au sein de la direction Tech Expertises & Solutions, le consultant rejoindra l'équipe en charge de la gestion des Référentiels Transverses. Cette équipe accompagne les différentes lignes métiers dans leurs usages des données de référence et intervient sur les processus d'acquisition, de consolidation, de distribution et de consommation des données d'entreprise. Nous recherchons un Business Analyst confirmé pour intervenir principalement sur les référentiels : Market Data : taux de change, taux interbancaires ; Static Data : caractéristiques des produits financiers. Ces référentiels sont fortement consommés par les différents métiers au travers de multiples technologies et canaux : API, Datalake, Kafka, fichiers et Mainframe. Missions principales La mission s'articulera autour de trois axes majeurs. 1. Refonte des référentiels Market Data – RATES V2 Finaliser la refonte des référentiels de taux de change et taux interbancaires ; Participer à la modernisation de la plateforme afin de traiter l'obsolescence technologique de l'existant ; Recueillir, analyser et formaliser les besoins ; Produire les spécifications fonctionnelles ; Rédiger les spécifications selon l'approche BDD – Behaviour Driven Development ; Collaborer avec les équipes techniques intervenant notamment sur Java, Angular, Python et Kafka ; Participer aux phases de recette et de validation de la solution. 2. Support utilisateurs RATES V2 Une fois la nouvelle plateforme RATES V2 mise en production : Assurer le support fonctionnel auprès des utilisateurs ; Analyser les problématiques rencontrées ; Accompagner les utilisateurs dans l'appropriation de la nouvelle plateforme ; Faire le lien entre les métiers et les équipes techniques. 3. Refonte du référentiel Resyproc Cadrer et conduire la refonte du Référentiel des produits de synthèse – Resyproc ; Analyser l'existant et les besoins d'évolution ; Recueillir et challenger les besoins des métiers ; Participer à la modernisation de l'interface et des fonctionnalités d'administration ; Accompagner les métiers Finance et Risques concernés par le référentiel. Resyproc intervient notamment dans les couches d'alimentation et de reporting des fonctions : Comptabilité ; Liquidité ; Prudentiel ; Pilotage financier ; Risques. Compétences et expériences requises Compétences particulièrement importantes : Expérience significative en tant que Business Analyst ou Product Owner ; Expérience en environnement projet Agile ; Bonne connaissance de l'approche BDD – Behaviour Driven Development ; Expérience significative dans la conception et le testing de traitements de transformation et d'alimentation de données ; Recueil, analyse et formalisation des besoins ; Rédaction de spécifications fonctionnelles ; Recette fonctionnelle et tests ; Bonne compréhension des problématiques Data / Référentiels / Flux de données ; Maîtrise d'Office 365, Jira et Confluence ; Français et anglais indispensables. Environnement fonctionnel & technique Le consultant évoluera dans un environnement comprenant notamment : Market Data ; Static Data ; Référentiels de données ; Taux de change ; Taux interbancaires ; Produits financiers ; Finance / Risques ; API ; Datalake ; Kafka ; Fichiers ; Mainframe ; Java ; Angular ; Python.