Almatek recherche pour l'un de ses clients Un Senior Data Engineer sur Vélizy. Contexte de la mission Dans le cadre du développement de ses capacités data, le client souhaite renforcer son équipe Data Engineering afin de : Construire et industrialiser des pipelines de données Structurer des architectures Data Lake / Data Warehouse modernes Améliorer la qualité, la performance et la scalabilité de la plateforme data Accompagner les équipes métiers dans l'exploitation des données Le consultant interviendra en collaboration étroite avec les équipes produit, plateforme, et métiers réparties à l'international. Environnement Fonctionnel & Technique ETL / ELT : Talend, SSIS, Azure Data Factory Base de données : SQL Server (Database Engine, SSIS, SSAS) Data Platform : Data Lake, Data Warehouse, Data Marts Outils : Power BI (PBIRS), dbt Technologies complémentaires : Trino, MinIO (ou équivalent) Cloud (nice to have) : GCP (BigQuery, GCS, Dataproc) CI/CD : Azure DevOps, GitLab Architecture : Medallion architecture Missions principales Data Engineering Concevoir, développer et maintenir des pipelines ETL/ELT Implémenter des mécanismes de chargement (full / delta / historique) Optimiser les performances des traitements et requêtes SQL Assurer la qualité et la fiabilité des données Data Architecture Concevoir des Data Lakes, Data Warehouses et Data Marts Modéliser des jeux de données complexes répondant aux besoins métiers Participer à la mise en place d'architectures modernes (medallion, distributed query) Data Integration Intégrer des données via API, fichiers et autres mécanismes d'ingestion Assurer l'interopérabilité avec les systèmes sources Collaboration & Agile Travailler avec Product Owners, équipes techniques et métiers Participer au cadrage des besoins (data discovery, data scoping) Appliquer les méthodologies Agile Industrialisation & CI/CD Mettre en place des pipelines CI/CD pour les déploiements Maintenir des standards de qualité (tests, documentation, versioning) Livrables Composants data développés et déployés (code source) Documentation technique et fonctionnelle Modèles de données documentés Rapports d'audit et de contrôle qualité Rapports de tests et validation Transfert de compétences et support Compétences requises Techniques Très bonne maîtrise SQL (optimisation, tuning) Expertise Microsoft Data Stack (SSIS, SSAS, SQL Server) Expérience en ETL/ELT et modélisation data Bonne connaissance des architectures Data modernes Expérience avec dbt Connaissance des moteurs distribués (Trino ou équivalent) CI/CD (Azure DevOps ou GitLab)
