Mission freelance Tech Lead Data – Migration vers Microsoft Fabric

Contexte
Dans le cadre de la modernisation de sa plateforme data, notre client remplace un ETL historique par un socle basé sur Microsoft Fabric et Spark. Les flux concernés alimentent un Data Hub finance/risque (contrats, positions, instruments de couverture, flux futurs, contreparties, notations, données de marché).
Pour piloter cette transformation, nous recherchons un Tech Lead Data, référent technique auprès des équipes data, architecture et métiers.

Descriptif de la mission

• Évaluer l’existant (flux batch, modèles pivots, dépendances applicatives) avec l’équipe data

• Concevoir le framework d’ingestion et de transformation (Spark / PySpark / Python / Notebooks)

• Définir les standards de développement et conventions de nommage

• Mettre en place la chaîne CI/CD (Azure DevOps, GitHub Actions ou équivalent)

• Mettre en œuvre les mécanismes de monitoring, alerting et logging des traitements

• Accompagner les équipes d’intégration et métiers sur les flux critiques

• Encadrer techniquement et mentorer une équipe d’environ 3 data engineers

• Optimiser les performances et garantir la qualité des livrables

• Contribuer à la documentation et au transfert de connaissances

Profil recherché

• Maîtrise de Spark / PySpark et des optimisations de performance

• Très bonne connaissance de Microsoft Fabric (Lakehouse, Notebooks, Data Pipelines, OneLake) ou Databricks

• Excellente pratique de Python pour les traitements de données et frameworks internes

• Très bon niveau SQL, bonne culture ETL/ELT, Data Hub et ingestion temps réel

• Pratique de la CI/CD (Azure DevOps, GitHub Actions ou similaire)

• Connaissance appréciée des Webservices / APIs REST

• Bonne compréhension des produits financiers (prêt, emprunt, titres, swaps, FX) appréciée

• Aisance relationnelle avec les équipes Finance et Risques, posture de “référent bienveillant”

• Expérience en lead technique / pilotage de projets data, autonomie, capacité d’auto-formation

• Français courant, anglais professionnel