Contexte Dans le cadre de notre croissance, nous recrutons Deux Data Engineer pour intervenir sur des environnements Databricks sur AWS, avec des enjeux d'ingestion, de transformation et de fiabilité des données. Missions Développement et ingestion de données • Concevoir et développer des pipelines de données en Python et Spark sur Databricks • Mettre en place des flux entre sources externes (ex : Oracle) et un Data Lake (S3 / Delta Lake) • Optimiser les traitements et les performances Orchestration et qualité des données • Orchestrer les workflows avec AWS Airflow • Mettre en place des contrôles qualité et des mécanismes de validation • Développer des outils de monitoring et de gestion des anomalies Maintien en condition opérationnelle • Assurer la disponibilité et la performance des pipelines • Diagnostiquer et corriger les incidents • Participer à l'amélioration continue des traitements Contribution • Participer aux ateliers techniques et aux échanges avec les équipes • Documenter les pipelines, architectures et processus • Contribuer aux bonnes pratiques Data et Big Data
Smartpoint, ESN spécialisée dans la Data et l'IA, recherche un Tech Lead Big Data / Data Engineer expérimenté pour renforcer une équipe Data au sein de la DSI d'un grand environnement SI. Vous interviendrez sur des enjeux de gestion de l'obsolescence technique, d'optimisation des traitements Big Data et d'accompagnement des équipes Data Engineering, avec pour objectif d'améliorer la performance, la qualité et la pérennité des applications. Vos missions En tant que Tech Lead Big Data, vous serez amené(e) à : Piloter la gestion de l'obsolescence : auditer les versions des composants applicatifs, identifier les risques et planifier les migrations techniques. Définir et diffuser les bonnes pratiques de développement auprès des équipes Data Engineer. Analyser et optimiser les traitements Big Data afin d'améliorer les performances, de maîtriser les coûts et de contribuer aux objectifs FinOps. Intervenir sur les développements de données et accompagner la résolution de bugs complexes. Accompagner les équipes techniques dans leurs choix d'architecture, leurs évolutions technologiques et leurs montées de version. Collaborer avec les équipes Socle et Infrastructure pour organiser et réaliser les migrations des composants. Animer les instances de suivi de l'obsolescence et communiquer les risques, les avancées et les recommandations aux équipes de pilotage. Proposer des orientations techniques et des solutions innovantes pour faire évoluer l'écosystème Data.
Nous recherchons pour une mission longue chez notre client secteur banque/finance en région parisienne un Tech Lead pour piloter la construction d'une data platform cloud autonome et gouvernée, au service d'une filière métier de la banque d'investissement. Vous rejoignez un programme de transformation multi-annuel et vous orientez les choix techniques et d'architecture. Vos missions : - Structurer le socle DevOps : infrastructure AWS décrite en Terraform (réseau, sécurité, IAM), pipelines CI/CD, environnements dev/staging/prod avec versioning et rollback. - Mettre en place le monitoring et l'observabilité de la plateforme, avec des déploiements automatisés maîtrisés. - Concevoir l'architecture d'orchestration des données (Airflow, Astronomer, Dagster) et les workflows ETL/ELT. - Déployer un framework de data quality : contrôles intégrés aux pipelines, alertes, dashboards et tests automatisés. - Proposer des outils self-service, des templates et des patterns réutilisables pour les équipes qui alimentent et consomment les données. - Garantir la gouvernance et la conformité : contrôle d'accès, chiffrement, traçabilité, data lineage. - Former et accompagner les équipes, et animer les bonnes pratiques DevOps et data. Ref : O-XXRBC
Développement, tests, intégration et configuration sur les environnements développement, test et production AWS / Databricks • Administration et MCO des plateformes Data • Développement, évolution, robustification et simplification des briques du socle • Intégration de nouvelles applications, notamment SaaS • Gestion de la sécurité, des secrets, des accès et matrices de droits • Amélioration continue du monitoring et mise en place de monitors • Enrichissement des normes d'exploitation • Gestion des incidents et problèmes selon les processus ITIL • Support technique N2/N3 • Revues de code et amélioration des tests d'intégration continue • Validation des merge requests • Mise à jour de la documentation • Diffusion des bonnes pratiques DevOps • Participation aux rituels Agile Scrum • Contribution aux sujets FinOps : surveillance, analyse et optimisation des coûts du socle
1. Description du posteDans le cadre du développement de projets Data et IA sur Microsoft Azure, nous recherchons un Expert Azure Databricks / Azure Batch pour concevoir, industrialiser et maintenir des plateformes de traitement de données à grande échelle. Le consultant interviendra sur des environnements Cloud exigeants, avec un fort niveau d'automatisation, de performance, de sécurité et de fiabilité. Il participera à la conception d'architectures Data modernes ainsi qu'au développement de solutions robustes et industrialisées. Ses principales responsabilités seront les suivantes : Concevoir et développer des pipelines de traitement de données distribués sous Azure Databricks. Développer des notebooks, workflows et composants techniques en Python et PySpark. Optimiser les performances des traitements Databricks et des jobs distribués. Concevoir des architectures Lakehouse basées sur Delta Lake. Industrialiser et orchestrer des traitements massifs avec Azure Batch. Configurer les pools de calcul et les stratégies d'exécution adaptées aux besoins. Optimiser la parallélisation, la distribution de charge et la consommation des ressources. Mettre en place des solutions de monitoring, d'observabilité et de gestion des incidents. Développer des librairies Python réutilisables, maintenables et testées. Réaliser des tests unitaires, d'intégration et de performance. Participer aux revues de code et à l'amélioration continue des pratiques de développement. Mettre en œuvre des pipelines CI/CD et automatiser les déploiements. Développer et maintenir l'Infrastructure as Code avec Terraform et/ou Bicep. Garantir la qualité, la sécurité et la conformité des déploiements. Accompagner les équipes projet dans l'adoption des standards Cloud, Data Engineering et DevOps.
Dans le cadre du développement de notre Data Factory, vous intégrerez une équipe en charge de concevoir, déployer et faire évoluer des plateformes Data innovantes, agiles et orientées métier. L'objectif est de développer des produits Data répondant aux besoins concrets des métiers, tout en garantissant leur performance, leur sécurité, leur qualité et leur évolutivité. Vos missionsDéveloppement de produits Data Transformer la donnée brute en données exploitables, notamment sous forme de tables requêtables dans le Data Lake. Consolider et orchestrer les données au fil de leur ingestion. Exploiter les données pour répondre aux enjeux métiers : création de Business Views, réintégration dans le SI, services de scoring, etc. Conception et industrialisation Participer à la conception et à l'évolution du socle technique Data. Développer, automatiser et fiabiliser les pipelines de données. Mettre en place et garantir un processus qualité rigoureux : documentation, tests unitaires et d'intégration, commentaires, versioning. Contribuer à l'amélioration continue des pratiques et des outils de développement Data. Profil recherchéDiplômé(e) d'un Master ou d'une école d'ingénieurs en informatique, sciences ou domaine similaire, avec une spécialisation en Data. 5 ans d'expérience minimum en tant que Data Engineer, idéalement dans un environnement Azure / Databricks. Maîtrise avancée de PySpark / Spark. Expertise de l'environnement Microsoft Azure : Data Factory, Databricks, Data Lake Storage, Azure DevOps, Git et CI/CD. Solide expérience en traitement de données batch et streaming. Bonne maîtrise de SQL et connaissance des bases NoSQL (Cosmos DB, MongoDB…). Bonne connaissance des méthodologies Agile (Scrum, Kanban). Capacité à travailler en collaboration avec des PO, BA, testeurs, architectes et équipes métiers. Qualités recherchéesRigueur et autonomie Esprit d'innovation Bonnes capacités de communication Esprit d'équipe Capacité d'adaptation Sensibilité aux enjeux de qualité et d'industrialisation des données
Au sein de la Data Factory d'un acteur majeur de l'assurance en France, l'équipe Infocentre consolide et diffuse les données métier de l'entreprise à partir d'une plateforme WPS. Pour renforcer l'expertise de l'équipe et accompagner la modernisation des outils, nous recherchons un(e) Tech Lead SAS/WPS en freelance. Missions Piloter le développement et la maintenance de traitements SAS/WPS complexes (performance, fiabilité, évolutivité) Garantir la cohérence technique des projets et le respect des normes de développement Encadrer une équipe de développeurs : revues de code, partage de bonnes pratiques, montée en compétences Gérer la relation avec l'éditeur et assurer la veille technologique Superviser les environnements WPS et garantir leur stabilité Participer aux recettes avec les équipes métier Traiter les incidents et demandes de support complexes Faire évoluer les processus, outils et architectures de la plateforme (workbench et hub)
Nous recherchons pour un acteur international, un Senior Data Engineer pour accompagner le développement et l'industrialisation de sa plateforme Data. Au sein d'une équipe Data en pleine structuration, vous interviendrez sur des sujets à forts enjeux autour de la donnée, avec notamment pour responsabilités : • Concevoir et développer des pipelines de données robustes et scalables • Industrialiser et fiabiliser les pipelines existants • Participer à la mise en place d'une architecture Data moderne de type Lakehouse • Prendre en charge les pipelines de bout en bout, de la conception à la mise en production et au monitoring • Mettre en œuvre les bonnes pratiques Data Engineering / DataOps : CI/CD, tests, versioning, monitoring et gestion des incidents • Collaborer avec les Data Engineers, Data Architects, Product Managers et Engineering Managers • Documenter les flux, dépendances, transformations et procédures d'exploitation • Contribuer à l'autonomie et à la montée en compétences de l'équipe Data
Missions : Être la référence technique Data Engineering : définir les standards d'architecture, challenger les choix techniques, industrialiser les pipelines, garantir performance/qualité/sécurité et accompagner les équipes. Profils recherchés : Senior / Expert – Lead Data Engineer / Data Architect / Data Engineering Design Authority Compétences : Architecture Data, batch/streaming, Kafka, Spark, Airflow, Databricks, Snowflake, Cloud, DataOps, gouvernance/sécurité. Anglais B2+
- Gestion des travaux de gouvernance sur les domaines de données des mesures d'énergie, relations contractuelles, et points de consommation - Catalogage de données sous Collibra avec les Data Owner : définitions des objets, processus métier, règles de qualité de données, data lineage - Analyse de données et mise en oeuvre d'actions de correction : correctifs ponctuels, en masse, ou évolution du SI - Mise en oeuvre de Key Quality Indicators (KQI) pour la surveillance des anomalies de données et des effets des actions de correction - Réalisation des études d'impacts Data
Un/une Technical Program Manager (TPM) est recherché(e) pour une mission longue basée à Lille (hybride). Le/la candidat(e) aura pour responsabilités d'aligner les contraintes des différentes équipes, d'orchestrer des chantiers d'infrastructure clés et de mettre en application les principes de gouvernance de la plateforme Data. La mission s'inscrit dans une transformation majeure du socle Datalake visant la modernisation de la gouvernance et des services Cloud (transition des services legacy d'ingestion et de traitement, ex. AWS Glue, vers un modèle de gouvernance unifié comme Unity Catalog), la rationalisation et le décommissionnement des espaces de stockage historiques (buckets S3 legacy) et l'accompagnement de la conduite du changement. Le/la TPM pilotera la feuille de route stratégique, fluidifiera la relation avec les experts techniques de l'équipe Datalake, animera la communauté des utilisateurs métiers et tech, et veillera au respect des échéances de fin de vie (EOL). Livrables attendus : audit d'usage et cartographie des dépendances, roadmap de migration et de décommissionnement, tableaux de bord de suivi, base de connaissances centralisée, kit de formation, plan de communication et animation récurrente des communautés (Office Hours, ateliers). Abonnez-vous à la page NaxoTech sur LinkedIn pour découvrir nos offres régulières
Vous voulez voir vos pipelines faire tourner la logistique d'un géant de la distribution ? Cette mission est pour vous. VADEMI recherche un Data Engineer confirmé / senior pour rejoindre la Data Factory d'un grand groupe national de la distribution, en pleine accélération. Après de premiers succès, la Data Factory passe à l'échelle : nouvelle organisation Agile en Domaine / Tribu / Squad, industrialisation des pratiques et livraisons accélérées. Vous intégrez la Squad Supply / Logistique, qui conçoit des produits BI, Analytics et Data Science sur une plateforme Azure + Databricks. Vos traitements alimentent concrètement les entrepôts, les magasins et les consommateurs. Vos missions : - Recueillir les besoins métier et analyser les données - Concevoir et construire des pipelines de données au sein du Data Lake - Développer des notebooks Databricks pour des traitements avancés (PySpark / Spark SQL) - Optimiser les traitements et tuner les requêtes SQL (Cloud Data Warehousing) - Réaliser les revues de code et les tests unitaires - Assurer la QA / le testing des pipelines de votre binôme Data Engineer - Construire des tableaux de bord Power BI - Rédiger la documentation technique (Dossiers d'Analyse Technique, release notes) - Livrer en continu via une chaîne CI/CD Azure DevOps Pourquoi nous rejoindre ? - Un rôle complet et à fort impact, du besoin métier jusqu'au dashboard - Une stack moderne : Azure, Databricks, Spark, Lakehouse, CI/CD - Un environnement Agile structuré, au cœur de la Supply Chain d'un leader du retail - Un rythme hybride : 2 jours de télétravail par semaine - Une mission en régie jusqu'à fin décembre 2026, avec perspective de prolongation Démarrage : dès que possible (fin septembre au plus tard) – Châtillon (92), 3 jours par semaine sur site. Processus : après votre candidature, nous vous transmettrons une grille de compétences à compléter. Un test technique est prévu en présentiel lors de l'entretien client.
Contexte Dans le cadre de la transformation digitale et l'accélération de l'usage de l'IA, la direction Project Management souhaite exploiter les avancées de l'IA afin de mieux capitaliser sur l'expérience, les connaissances et l'expertise de ses équipes. Les métiers reposent sur un savoir-faire technique développé au fil de nombreuses années, porté par des experts dont les connaissances sont dispersées dans des documents et bases de données. L'objectif est de développer des cas d'usages d'IA pour valoriser ce patrimoine afin d'assurer la pérennité des compétences et faciliter leur transmission tout en améliorant la performance opérationnelle et en générant des gains financiers.
Nous recherchons un(e) Consultant(e) Data & Insights pour rejoindre notre équipe. Votre rôle sera de vous assurer que les données sont transformées en insights pertinents et exploitables, contribuant à l'amélioration continue de nos services. Votre travail aura un impact direct sur les problématiques commerciales et stratégiques liées à la Banque Privée. Responsabilités principales : - Prendre en charge le processus de bout en bout, depuis la collecte du besoin jusqu'à la livraison d'insights basés sur les données pour le secteur de la Banque Privée. - Réaliser des entretiens de cadrage avec les demandeurs, identifier les besoins en information et concevoir les solutions analytiques appropriées. - Développer et présenter des analyses de données à l'aide de SQL ou Python, puis traduire les résultats en recommandations concrètes et exploitables. - Piloter des projets visant à développer des opportunités commerciales (commercial leads) basées sur les données et à les déployer auprès des équipes métier et IT. - Suivre les délais et gérer les attentes des différentes parties prenantes afin de garantir une livraison des analyses dans les temps. - Accompagner les équipes transverses dans l'amélioration des parcours clients, de la conversion commerciale et du développement de nouvelles offres.
Nous recherchons un(e) Développeur(se) Python / Data Engineer passionné(e) pour rejoindre notre équipe et contribuer à la conception et au développement de plateformes et de pipelines permettant l'industrialisation de modèles de Machine Learning. Ces solutions couvrent l'ensemble du cycle de vie des modèles : préparation des données et des features, entraînement, tuning, inférence, exposition via APIs et orchestration des traitements dans un environnement cloud. Elles permettent aux Quants et Data Scientists d'industrialiser l'utilisation de modèles avancés dans les processus de prévision de la consommation et de la production d'énergie.
Le consultant interviendra sur l'ensemble du cycle de vie des solutions AI/ML, de l'identification des cas d'usage jusqu'à la mise en production, avec un fort enjeu de sécurité, scalabilité et industrialisation. Missions principales : - Identifier, analyser et prioriser les cas d'usage AI/ML appliqués à la cybersécurité et à l'IAM. - Développer des modèles de Machine Learning permettant de détecter les comportements utilisateurs anormaux, les schémas d'accès suspects et les potentielles menaces de sécurité. - Concevoir, tester et déployer des modèles AI/ML scalables intégrables aux plateformes de cybersécurité. - Développer des solutions AI, LLM et Advanced Analytics. - Concevoir et optimiser les prompts, les sorties structurées et les mécanismes d'évaluation des modèles. - Mettre en place le monitoring et l'évaluation des solutions AI/ML. - Industrialiser les modèles et solutions analytiques jusqu'à leur mise en production. - Garantir la qualité, la maintenabilité, les tests et l'intégration continue. - Prendre en charge les projets de bout en bout, de la phase de découverte jusqu'à la livraison. - Collaborer avec les équipes Engineering, Cybersécurité et métiers.
