TEKsystems recherche pour l'un de ses clients grand compte un(e) Data ingénieur (H/F) Les tâches : Établir et sécuriser des connexions techniques robustes et évolutives avec les systèmes sources Corporate identifiés (ERP, Plateformes Financières, RH, ITSM etc.). Extraire et charger les données des domaines fonctionnels Corporate clés : finance, ressources humaines, référentiels, achats, etc. Concevoir et implémenter des pipelines d'ingestion automatisés fiables et performants, garantissant l'intégrité et la fraîcheur des données. Structurer et modéliser les données dans un entrepôt de données (Data Warehouse Snowflake) de manière logique, modulaire, réutilisable et optimisée pour l'analyse et la restitution. Mettre en place des mécanismes de gouvernance des données : gestion des métadonnées, logiques de rafraîchissement, suivi de la qualité des données et gestion des erreurs. Développer des vues et agrégats de données spécifiques aux besoins de restitution et d'analyse des différents départements Corporate. Documenter de manière exhaustive les pipelines d'ingestion, les modèles de données (logique et physique), les règles de transformation et les points de reprise pour assurer la maintenabilité et la transférabilité. Environnement technique Sources : Multiples systèmes Corporate (Systèmes Financiers, Plateformes Achats, Outils ITSM. - via APIs, exports ou connecteurs natifs). Destination : Snowflake(Data Warehouse Cloud). Orchestration : Airflow. Transformation : DBT Core / SQL, Python (Pandas/PySpark) ou équivalent. Modélisation : DrawIO, Lucidchart ou autre support outil libre. Visualisation / Restitution : Tableau. CI/CD / versioning : GitLab, GitHub. Documentation : Confluence, Jira, SharePoint.
Chez ATLANSE, nous accompagnons nos clients dans la conception d'infrastructures résilientes, l'amélioration de la performance de leur production applicative, l'optimisation et le développement des environnements de travail ainsi que l'exploitation et la valorisation des données. Pour cela, nous nous appuyons sur nos consultants confirmés et experts ou à fort potentiel, reconnus pour leurs compétences techniques, leur compréhension métier et leurs pratiques éprouvées. En tant que Data Engineer Azure, vous contribuez à la mise en place de solutions data modernes et performantes, au service des enjeux métiers et de la stratégie data-driven. Votre rôle Ingestion & Traitement des données · Implémenter des solutions d'ingestion de données répondant aux différents cas d'usage métiers · Concevoir et mettre en œuvre des pipelines de données (batch et streaming) robustes et scalables · Assurer la reprise d'historique et réaliser des tests de non-régression pour garantir la qualité des données Construction & Optimisation des plateformes Data · Participer à la mise en place et l'évolution des environnements Data Lake / Data Warehouse / Big Data · Réaliser la modélisation et la consolidation de gros volumes de données en respectant les standards et bonnes pratiques · Optimiser les traitements existants, améliorer les performances des flux et diffuser les bonnes pratiques d'usage au sein des équipes Intégration DevOps & Industrialisation · Déployer des pipelines de données dans une approche CI/CD et dans un contexte DevOps · Gérer l'évolution des solutions proposées et assurer le support / TMA si nécessaire · Mettre en place l'automatisation des tests, du monitoring et des déploiements pour fiabiliser les solutions Gouvernance & Documentation · Rédiger et maintenir à jour la documentation projets (DATe, DEX, …) · Contribuer à la qualité des données et à leur bonne gouvernance (catalogue, lineage, sécurité, conformité)
Tâches : - Qlik Replicate: - Replication tasks (Source: SAP, Destination: Snowflake) - Snowflake: - Medallion structure (Bronze: Raw, Silver: Core, Gold: Published) - Matillion: - Data transformation tasks between Snowflake layers - Other data tools (Alteryx, Tableau, SAP Business Objects): - Alteryx flows reading snowflake to publish Alteryx yxdb and Tableau data sets - SAP Business Objects / BW reports distributed directly to end users via email. Répartition estimée des tâches : - Snowflake: 50% - Qlik Replicate: 15% - Matillion: 25% - Other data tools: 10% Mandatory skills - Qlik, Snowflake,Matillion Desired - SAP BO Bonus - Alteryx, Tableau Outils à connaître : - Qlik Replicate o Configure, optimise and monitor data replication pipelines o CDC Management o Endpoints Source: SAP, Target: Snowflake - Snowflake o Warehouse design – architect, build and optimise data warehouses within Snowflake o Integration with Qlik and/Matillion - Matillion o Build and maintain transformation pipelines using Matillion ETL - SAP Business Objects o Universe Development – design, build and maintain Information Design Tool (IDT) and Universe Design Tool (UDT) layers o Report Creation – develop reports and dashboards using Web Intelligence (WebI) - Alteryx o Knowledge of design, build and maintenance of ETL workflows with Alteryx Designer - Tableau o Knowledge of data preparation for tableau datasets
