Dans le cadre du renforcement d'une équipe Data, nous recherchons un Data Engineer BI – Microsoft Azure / Power BI pour intervenir sur des projets décisionnels dans un environnement Microsoft Azure. Vous aurez pour missions : Au sein de l'équipe Data et en collaboration avec le chef de projet, vous interviendrez sur les activités suivantes : Créer et optimiser des bases de données (SQL Server principalement). Prendre en charge les développements de scripts SQL/Procédures. Prendre en charge les développements des pipelines Azure Data Factory. Participer à la mise en place de bonnes pratiques (CI/CD, DevOps Data, Data Quality). Être force de propositions sur les optimisations de traitement Rédaction de la documentation (spécifications techniques), recettes. Gestion du code source via Microsoft Devops et déploiement CI/CD. Préparation des livrables pour les mises en production
Au sein d'un acteur majeur du retail européen, l'équipe Data & IA Marketplace traite des volumes massifs de données issues de vendeurs tiers. L'objectif est d'automatiser la qualification, la classification et l'enrichissement des catalogues produits pour garantir une expérience utilisateur optimale. Le défi réside dans l'industrialisation de modèles complexes au sein d'une architecture Data Mesh en forte croissance. La Stack Technique Langages : Python, Bash. Cloud : GCP (Google Cloud Platform). Orchestration & MLOps : Airflow, Kubeflow, ZenML, MLflow, Vertex AI. Infrastructure & DevOps : Docker, Kubernetes, Terraform, Ansible, Gitlab CI. Data Quality & Feature Store : Great Expectations, Feast. Ta Mission & Ton Impact : Concevoir et maintenir des pipelines MLOps automatisés (CI/CD) pour l'entraînement et le déploiement des modèles en production. Gérer l'infrastructure cloud via Terraform et assurer le versioning complet des modèles et des données. Implémenter le monitoring de performance (détection de drift, latence) et configurer l'alerting pour garantir la fiabilité des solutions. Accompagner les Data Scientists dans l'adoption des meilleures pratiques de développement (code quality, tests, industrialisation). Intégrer des validations de schémas et des filtres de qualité de données au sein des pipelines de production.
ContexteDans le cadre de l'évolution et de la modernisation d'une Data Platform, nous recherchons un(e) Staff Data Platform Engineer pour contribuer à l'excellence engineering de l'écosystème data. Au sein d'une organisation Data Mesh mature, vous aurez un rôle transverse de facilitateur, d'accélérateur et de référent technique auprès des différentes équipes Data Engineering. Votre mission sera de faire le lien entre les capacités de la plateforme centrale et les besoins opérationnels des équipes produit, avec un fort enjeu autour de la Developer Experience (DevEx), de la standardisation des pratiques et de l'accélération de la mise en production des produits data. Vos missionsDeveloper Experience & Data EngineeringOptimiser le cycle de vie des pipelines Data, du développement local jusqu'à la production. Concevoir et standardiser des paved paths permettant aux équipes Data de développer et déployer plus efficacement. Développer et partager des composants, templates et outils facilitant le travail des Data Engineers. Contribuer à la mise en place de standards autour du CI/CD, des tests, de l'observabilité et de la qualité. Promouvoir les bonnes pratiques d'ingénierie logicielle au sein de la communauté Data. Innovation & IAIntégrer les outils d'IA générative et de développement assisté dans les pratiques quotidiennes des Data Engineers. Identifier et développer des cas d'usage permettant d'améliorer la productivité des équipes. Participer à la construction d'un AI Toolkit dédié aux besoins du Data Engineering. Accompagner l'évolution des pratiques vers une ingénierie Data augmentée par l'IA. Architecture & Excellence techniqueConcevoir des frameworks et patterns favorisant la qualité, la maintenabilité et la fiabilité des pipelines. Mettre en place des mécanismes de feedback loop, observabilité, data quality et data contracts. Contribuer à l'évolution de l'architecture Data et à sa modernisation progressive. Challenger les pratiques et architectures existantes afin d'identifier les axes d'amélioration. Accompagner la transition progressive vers des architectures Open Lakehouse et des modèles Data modernes. Prendre en compte les enjeux de FinOps, sécurité et RGPD by design. Gouvernance & accompagnementÊtre le représentant des besoins de la communauté Data Engineering auprès de l'équipe Platform. Faciliter l'alignement entre les pratiques locales et les standards d'ingénierie globaux. Conseiller les équipes responsables du socle technique de la plateforme. Favoriser le partage de connaissances et la mutualisation des initiatives au sein de la communauté Data. Travailler avec des équipes internationales dans un environnement matriciel. Environnement techniqueData Engineering / Data Platform Data Mesh GCP / BigQuery Data Vault / Star Schema CI/CD DataOps Data Quality Data Contracts Observabilité API / CLI tooling YAML Automatisation GenAI / Copilots / AI Engineering Open Lakehouse FinOps GDPR / Privacy by Design
