Dans le cadre de la modernisation et de la transformation de sa plateforme Data, Le recherche plusieurs Data Engineers GCP pour renforcer ses équipes Datawarehouse et accompagner des projets stratégiques de migration vers Google Cloud Platform. Contexte Vous intégrerez des équipes expertes évoluant dans un environnement Data à fort volume, au cœur des enjeux de transformation du groupe. Les missions porteront notamment sur : L'évolution et l'optimisation du Datawarehouse La migration des environnements Teradata vers GCP / BigQuery La refonte des applications critiques de gestion des équipages La conception et l'industrialisation de nouveaux pipelines de données L'optimisation des performances BigQuery et des processus CI/CD Profil 1 : Data Engineer Datawarehouse GCPVos missions Développer et maintenir les flux d'alimentation du Datawarehouse Participer aux évolutions des modèles de données Optimiser les traitements SQL et les performances des requêtes Contribuer à la migration des données vers GCP Environnement technique SQL (Teradata / BigQuery) : 60 % ETL Informatica PowerCenter / IDMC : 20 % GCP, Control-M, Jira : 20 % Profil recherché Minimum 5 ans d'expérience en Data Engineering Excellente maîtrise SQL Solide expérience sur GCP et BigQuery Connaissance d'Informatica appréciée Autonomie et capacité à évoluer dans un environnement complexe Profil 2 : Data Engineer SQL & DatavizContexte Projet stratégique de refonte complète des applications de gestion des équipages avec regroupement de plusieurs systèmes au sein d'une plateforme unique. Vos missions Analyse fonctionnelle et technique de l'existant Conception de nouveaux pipelines de données Participation à la migration Teradata vers BigQuery Création et optimisation des reportings décisionnels Environnement technique SQL BigQuery & Dataform : 70 % Business Objects / Power BI : 20 % Informatica IDMC : 5 % Terraform & GCP Infrastructure : 5 % Profil recherché Très forte expertise SQL Expérience sur BigQuery indispensable Bonne maîtrise d'un outil de Dataviz (Power BI ou BO) Forte capacité d'analyse fonctionnelle Sensibilité Data Engineering et architecture Data Profil 3 : Expert Data Engineer GCP / BigQueryVos missions Optimisation des développements et standards de code Amélioration des performances BigQuery Structuration et optimisation des repositories Git Mise en place des bonnes pratiques CI/CD Compétences indispensables ✅ Google Cloud Platform (GCP) ✅ BigQuery ✅ GitHub / GitHub Actions ✅ CI/CD ✅ Expertise performance et industrialisation Data
ContexteDans le cadre de l'évolution et de l'optimisation de sa plateforme décisionnelle, notre client recherche un Data Engineer SQL & GCP expérimenté afin de renforcer l'équipe en charge du Datawarehouse. Vous interviendrez sur des projets liés à la gestion, à la transformation et à l'optimisation des données, avec un fort enjeu de performance et de qualité des traitements dans un environnement Cloud Google. Vos missionsConcevoir, développer et maintenir les traitements d'alimentation du Datawarehouse. Développer et optimiser des requêtes SQL complexes sur Teradata et Google BigQuery. Concevoir et maintenir les flux ETL sous PowerCenter et/ou IDMC (Informatica Intelligent Data Management Cloud). Participer à la migration et à l'industrialisation des traitements vers Google Cloud Platform. Garantir la qualité, la performance et la fiabilité des traitements de données. Participer aux phases d'analyse, de conception technique et de recette. Assurer le suivi des traitements batch et résoudre les incidents. Collaborer avec les équipes Data, BI, Architecture et Métiers dans un environnement Agile. Environnement techniqueBases de données & SQL (60%)SQL avancé Teradata Google BigQuery ETL (20%)Informatica PowerCenter Informatica IDMC Outils & Cloud (20%)Google Cloud Platform (GCP) Control-M Jira Git (apprécié) Profil recherchéMinimum 5 ans d'expérience en Data Engineering. Excellente maîtrise de SQL, notamment sur de gros volumes de données. Expérience significative sur Teradata et/ou Google BigQuery. Bonne maîtrise des outils Informatica PowerCenter ou IDMC. Expérience dans un environnement Google Cloud Platform (GCP). Connaissance des ordonnanceurs (Control-M) appréciée. Expérience en environnement Agile. Autonomie, rigueur et esprit d'équipe. Compétences indispensablesSQL avancé Teradata Google BigQuery Informatica PowerCenter ou IDMC Google Cloud Platform (GCP) Datawarehouse Optimisation de requêtes SQL Les plusExpérience dans un contexte industriel ou aéronautique. Connaissance des problématiques de migration vers le Cloud. Maîtrise des outils de suivi de projet (Jira). Sensibilité aux bonnes pratiques Data et à la qualité des données.
TEKsystems recherche pour l'un de ses clients grand compte un(e) Data ingénieur (H/F) Les tâches : Établir et sécuriser des connexions techniques robustes et évolutives avec les systèmes sources Corporate identifiés (ERP, Plateformes Financières, RH, ITSM etc.). Extraire et charger les données des domaines fonctionnels Corporate clés : finance, ressources humaines, référentiels, achats, etc. Concevoir et implémenter des pipelines d'ingestion automatisés fiables et performants, garantissant l'intégrité et la fraîcheur des données. Structurer et modéliser les données dans un entrepôt de données (Data Warehouse Snowflake) de manière logique, modulaire, réutilisable et optimisée pour l'analyse et la restitution. Mettre en place des mécanismes de gouvernance des données : gestion des métadonnées, logiques de rafraîchissement, suivi de la qualité des données et gestion des erreurs. Développer des vues et agrégats de données spécifiques aux besoins de restitution et d'analyse des différents départements Corporate. Documenter de manière exhaustive les pipelines d'ingestion, les modèles de données (logique et physique), les règles de transformation et les points de reprise pour assurer la maintenabilité et la transférabilité. Environnement technique Sources : Multiples systèmes Corporate (Systèmes Financiers, Plateformes Achats, Outils ITSM. - via APIs, exports ou connecteurs natifs). Destination : Snowflake(Data Warehouse Cloud). Orchestration : Airflow. Transformation : DBT Core / SQL, Python (Pandas/PySpark) ou équivalent. Modélisation : DrawIO, Lucidchart ou autre support outil libre. Visualisation / Restitution : Tableau. CI/CD / versioning : GitLab, GitHub. Documentation : Confluence, Jira, SharePoint.
Notre client dans le secteur Aérospatial et défense recherche un/une Data Engineer H/F Description de la mission : Dans le cadre d'un programme de transformation Data au sein d'un acteur majeur de l'aéronautique, nous recherchons un Data Engineer GCP en freelance afin de renforcer une équipe en charge d'un projet décisionnel stratégique dédié aux opérations au sol. La mission s'inscrit dans un contexte de migration et d'optimisation d'une plateforme Data Warehouse sur Google Cloud Platform. L'objectif est d'améliorer les performances des traitements, la qualité du code et l'organisation des référentiels Git tout en réduisant la dette technique. Missions principalesParticiper à l'évolution et à l'optimisation d'une plateforme Data Warehouse sur GCP Améliorer les performances des traitements et requêtes BigQuery Optimiser la structure, l'organisation et la maintenabilité des dépôts Git Contribuer à l'amélioration continue des pratiques de développement et de déploiement Participer à la mise en place et à l'amélioration des chaînes CI/CD Accompagner la migration des solutions BI vers l'environnement GCP Collaborer avec les équipes métiers afin de comprendre et valoriser les données opérationnelles Participer à la réduction de la dette technique et à la définition des bonnes pratiques de développement Environnement techniqueCompétences indispensablesGoogle Cloud Platform (GCP) BigQuery Git / GitHub CI/CD GitHub Actions ou outils équivalents Connaissances appréciéesData Warehouse / BI Optimisation de performances Data Méthodologies Agile (Kanban) Profil recherchéMinimum 5 ans d'expérience en Data Engineering Excellent esprit d'équipe Forte capacité d'intégration dans un environnement existant Sens de l'écoute Bonnes qualités de communication Autonomie et capacité à être rapidement opérationnel Challenges de la missionPrendre en main un projet comportant plusieurs dizaines de modules Optimiser les performances des traitements BigQuery à grande échelle Structurer durablement les pratiques de développement et les dépôts Git Poser des bases solides pour l'exploitation de la plateforme Data sur GCP Réduire la dette technique tout en accompagnant les évolutions fonctionnelles Compétences / Qualités indispensables : Java, Spark, GCP, Big Query Compétences / Qualités qui seraient un + : Expérience dans l'optimisation de plateformes Data à fort volume, Appétence pour les environnements métiers opérationnels complexes Informations concernant le télétravail : Oui — 4 jours/semaine
Dans le contexte de la transformation de la data, le DataLab a besoin de se renforcer ponctuellement pour développer et déployer un datawarehouse accompagnant l'amélioration de la performance de la société. Périmètre / Scope La mission concerne la donnée interne et vise l'optimisation de l'utilisation de la donnée. L'intervenant devra gérer les activités suivantes : Activité #1 : Traduction des besoins des clients en termes techniques Activité #2 : Développement job Talend pour alimenter Datawarehouse DMS Activité #3 : Développement de cube SSAS pour alimenter dashboard Activité #4 : Documentation opérationnelle et technique du livrable (cf ci-dessous) Activité #5 : Accompagnement du déploiement dans environnement sécurisé Résultat/ livrables de la mission : Document de spécifications techniques des exigences Réalisation de jobs Talend Réalisation de cubes SSAS Documentation technique des jobs et cubes réalisés Compétences requises : Outil : Talend, SSAS, SQL Modélisation décisionnelle Expérience en AMOA : tenue de réunions, écoute, synthèse, formalisation La personne intégrera une équipe assez junior. J'ai donc besoin d'un profil capable d'assurer à la fois un rôle opérationnel et un rôle de formateur auprès de l'équipe : mise en place de processus, standardisation, relecture de code, et accompagnement sur des projets types (par exemple l'historisation des données dans Talend). Je pense qu'il faut viser une personne avec plus de 10 ans d'expérience spécifique sur Talend.
A LIRE ATTENTIVEMENT AVANT DE POSTULER ⬇ 📑 Portage / Freelance - 🏠 2.5 jours de télétravail / semaine - 📍 Nantes - 🛠 Expérience de 3 ans minimum Nous poursuivons notre développement et recherchons actuellement un.e Data Engineer pour accompagner l'un de nos clients, issu du bancaire, intervenant sur des applications critiques liées au risque de crédit. 💻💼 Contexte : Vous participerez au développement et à l'évolution d'un Datawarehouse central qui alimente les processus métiers et le reporting réglementaire. Votre rôle : Au quotidien, vos missions seront les suivantes : Analyser les besoins fonctionnels en lien avec les équipes métier Concevoir et développer les composants techniques Participer à la mise en place et à l'évolution des Datamarts Garantir la qualité, la fiabilité et la disponibilité des données Développer et maintenir les pipelines de traitement et d'intégration des données Réaliser les tests, les recettes et accompagner les mises en production Participer aux activités de maintenance corrective et évolutive ainsi qu'au RUN Contribuer à l'amélioration continue des pratiques de développement et de l'environnement technique Travailler au sein d'une équipe organisée en Agile (rituels, collaboration, amélioration continue) Environnement technique : Teradata SQL Linux / Shell Unix (ksh) Big Data / Datawarehouse / BI décisionnelle SAS IBM DB2 Mainframe (des connaissances sont un plus) Cloud (une première expérience est appréciée mais pourra être acquise durant la mission) Votre profil : Vous disposez d'au moins 3 ans d'expérience sur des projets Data, BI ou Big Data, et avez déjà travaillé avec Teradata (idéalement dans le cadre de migration) Une expérience sur des projets liés au secteur bancaire ou au risque de crédit serait un véritable atout, sans être indispensable.
Pour l'un de nos clients, nous recherchons un(e) Ingénieur DATA BI & Cloud Azure pour renforcer leurs équipes IT. Votre poste et vos missions Membre de l'équipe IT & Digital, vous intervenez au cœur des différents projets de développement du Groupe sur un périmètre international. Dans le respect de la stratégie IT établie par le DSI, votre mission consiste à : Mise en place d'une vraie démarche data-driven au niveau technique - Apporter votre expertise technique et vos idées lors de la mise en place de projets concernant les développement données / BI - Force de proposition sur des nouvelles architectures et solutions d'intégration des données - Connaissances des principes big data et IoT - Connaissances avancées en datawarehouse et modèles de gouvernance des données - Connaissances des API Data pour le temps réel
SummaryThe primary function of the Data Engineer role is to design, develop, and maintain scalable data pipelines on the Databricks platform to facilitate the energy transition for retail customers in Belgium. This role aims to support the implementation of the Databricks platform within the context of an AWS environment, enabling efficient data processing for various projects. Main Responsibilities:Core duty description: This role involves managing and optimizing data processes to support various business projects. Design, develop, and maintain scalable data pipelines on the Databricks platform. Manage data ingestion processes from various sources into the Databricks environment. Implement and optimize ETL (Extract, Transform, Load) processes to ensure efficient data transformation and integration. Ensure data quality, integrity, and security across all data pipelines. Monitor and troubleshoot data pipeline performance, implementing necessary maintenance and updates. Document data pipeline processes, technical specifications, and best practices. Conduct knowledge transfer to the Data Engineer team responsible for managing the platform in the future. Key Requirements:Strong skills in SQL and relevant programming languages (e.g., Python). Proven expertise in Databricks and AWS services. K.modal expertise in Databricks to support BI activities (Kimball modeling). Analytical mindset with attention to detail. Strong communication and collaboration skills. Nice to Have:Experience in Datawarehouse or Lakehouse projects. Additional programming languages beyond SQL and Python. Experience with data quality management tools. Other Details:Location: Belgium Team Structure: Reporting to a Project Lead and a Tech Lead/Data Architect. Qualifications: Bachelor's degree in Computer Science, Engineering, Mathematics, or a related field. Experience: Minimum 3 years in SQL and Data warehousing, and 2 years with Databricks. Languages: Fluent in Dutch or French and English.
Dans le cadre d'un programme de migration DataPlatform, nous recherchons un Chef de Projet / Product Owner orienté Data pour piloter la migration d'un patrimoine décisionnel vers une plateforme Data SaaS. Vous interviendrez au sein d'une équipe en charge du socle Data, comprenant notamment les chaînes ETL, le Datawarehouse et les outils de Data Visualisation. Votre rôle sera de piloter le produit, son Backlog, d'animer les cérémonies Agile, de challenger l'existant afin d'identifier les meilleures solutions et de coordonner les travaux de l'équipe de développement. Vos principales missions :Piloter le projet sur les volets planning, comitologie, budget et suivi des actions. Assurer le suivi de la recette et contribuer à la conduite du changement. Construire et prioriser le Backlog produit. Rédiger et suivre les User Stories. Animer les cérémonies Agile / Scrum / Kanban. Organiser et coordonner les travaux de l'équipe de développement. Challenger l'existant et contribuer à la définition des solutions cibles. Coordonner les différents interlocuteurs : équipes IT, architectes, infrastructure, sécurité, métiers et éditeur. Assurer une maîtrise rigoureuse des risques, actions, délais et budgets.
A LIRE ATTENTIVEMENT AVANT DE POSTULER ⬇ 📑 CDI (36-42K€) - 🏠 2.5 jours de télétravail / semaine - 📍 Nantes - 🛠 Expérience de 3 ans minimum Nous poursuivons notre développement et recherchons actuellement un.e Data Engineer pour accompagner l'un de nos clients, issu du bancaire, intervenant sur des applications critiques liées au risque de crédit. 💻💼 Contexte : Vous participerez au développement et à l'évolution d'un Datawarehouse central qui alimente les processus métiers et le reporting réglementaire. Votre rôle : Au quotidien, vos missions seront les suivantes : Analyser les besoins fonctionnels en lien avec les équipes métier Concevoir et développer les composants techniques Participer à la mise en place et à l'évolution des Datamarts Garantir la qualité, la fiabilité et la disponibilité des données Développer et maintenir les pipelines de traitement et d'intégration des données Réaliser les tests, les recettes et accompagner les mises en production Participer aux activités de maintenance corrective et évolutive ainsi qu'au RUN Contribuer à l'amélioration continue des pratiques de développement et de l'environnement technique Travailler au sein d'une équipe organisée en Agile (rituels, collaboration, amélioration continue) Environnement technique : Teradata SQL Linux / Shell Unix (ksh) Big Data / Datawarehouse / BI décisionnelle SAS IBM DB2 Mainframe (des connaissances sont un plus) Cloud (une première expérience est appréciée mais pourra être acquise durant la mission) Votre profil : Vous disposez d'au moins 3 ans d'expérience sur des projets Data, BI ou Big Data, et avez déjà travaillé avec Teradata (idéalement dans le cadre de migration) Une expérience sur des projets liés au secteur bancaire ou au risque de crédit serait un véritable atout, sans être indispensable.
Contrainte forte du projet --> Connaissance Power BI, MOA, modélisation datawarehouse Compétences techniques : Modélisation datawarehouse - Expert Power BI - Expert Gestion de projet - Expert MOA - Expert Description détaillée : Dans le cadre de la modernisation de notre stack décisionnelle, nous lançons un projet d'envergure visant à migrer l'ensemble de notre écosystème SAP BusinessObjects vers Microsoft Power BI. Nous recherchons un(e) Chef de Projet capable de piloter une partie de cette transition stratégique, de la phase de cadrage jusqu'à l'adoption finale par les métiers. L'objectif sera de piloter la migration de notre datamart pub parrainage. Les missions : Cadrage : Prendre connaissance de l'existant et ressortir les cas d'usages métier. Pilotage de la Migration : Définir le planning, gérer le budget, coordonner les ressources techniques (Analytics Engineers, développeur Power BI) et assurer le suivi des jalons. Conception de la Cible : Superviser la modélisation des nouveaux jeux de données (Datawarehouse, Datasets) et la création des dashboards sur Power BI Service. Gouvernance : Mettre en place les bonnes pratiques de développement, de sécurité et d'administration de la plateforme Power BI. Accompagnement au Changement : Animer les ateliers avec les utilisateurs métiers, rédiger les documentations et assurer la formation des utilisateurs. Profil recherché : Une forte expertise sur la BI est impératif ( modélisation d'un datawarehouse, méthode d'historisation, exploration de la donnée) Maîtrise des langages SQL. Maitrise de databriks ou d'un outil équivalent (SQL Server, Snowflake). Connaissance BO et du développement de rapport. Maitrise du cycle en V et de la méthode Scrum. Pédagogie, esprit d'analyse, et capacité à traduire des besoins métiers complexes en solutions techniques simples sont attendus pour ce poste. Définition du profil : Il définit, met en oeuvre et conduit un projet BI dans le but d'obtenir un résultat optimal et conforme aux exigences métiers formulées et validées par ou pour le commanditaire en ce qui concerne la qualité, les performances, le coût, le délai et la sécurité.
Nous recherchons un(e) DATA ARCHITECTE POWER BI / AZURE Dans le respect de la stratégie IT établie par le DSI, votre mission consiste à : Responsabilités : • Analyser les besoins fonctionnels. • Localiser les données de production. • Déterminer les spécifications techniques. • Définir l'architecture. • Modéliser les datawarehouse (entrepôts de données) et les datamarts (magasins de données) dédiés à une fonction particulière dans l'entreprise. • Accompagner le client dans la réalisation du projet. • Maintenir les sources de données à jour • Mettre à disposition les données aux métiers • Superviser les flux de données et en contrôler l'intégrité
Dans le cadre du renforcement d'une équipe Data, nous recherchons un Data Engineer Microsoft Fabric confirmé afin de participer à la conception, au développement et à l'industrialisation des traitements de données sur la plateforme Microsoft Fabric. Vous interviendrez sur l'ensemble de la chaîne de traitement des données, de l'ingestion à la mise à disposition, en garantissant la qualité, la performance et la fiabilité des pipelines. Vos missionsConcevoir, développer et maintenir des pipelines de données sous Microsoft Fabric. Développer les traitements de transformation de données en Python, PySpark et SQL. Concevoir et exploiter des architectures Lakehouse, Delta Lake et Data Warehouse. Paramétrer et configurer les différents composants de l'écosystème Microsoft Fabric. Garantir la qualité, la performance et la fiabilité des traitements de données. Automatiser les déploiements et contribuer à l'industrialisation des développements (CI/CD). Participer aux phases de tests, de recette et de mise en production. Assurer la maintenance évolutive et corrective des solutions Data. Collaborer avec les équipes Data, BI, Architecture et Métiers afin de répondre aux besoins fonctionnels et techniques. Participer à l'amélioration continue des bonnes pratiques de développement et de gouvernance des données.
Data Engineer with C# Dot Net with SQL Server SSRS and Power BI Our Client is a bank based in City London who are looking to recruit at least 7 years plus experience as a Data Engineer with the ability to work with C# Dot net and SQL Server with SSRS. You must have solid expertise of at least 7 to 10 years experience of working with and developing software with C# Dot Net and MS SQL Server and SSRS – SSRS is very important for this position. Additionally, you must have sound experience of working with Power BI and Python. Must be an excellent problem solver and adept writing documentation for all projects. You ideally have worked on banking systems particularly Core Banking. Responsible for the development and delivery of new systems to automate and streamline processes required by different departments. To support the internal IT department with changes and upgrades to software platforms. To be primary contact for all technical questions relating to in-house bespoke systems and interfacing. Data Support Supporting budgeting and financial planning processes for Finance department, including loading and refreshing of data based on requirements. Understand and conduct the front-end functionality to amend and change hierarchical structures within the environment. Build data flows within the SQL environment in SSRS packages. Risk & Regulatory Maintain knowledge of all applicable regulatory requirements including the Bank's Risk and Compliance policies and procedures and adhere to these to avoid exposing the Bank to undue risk. Report policy/procedure breaches and areas of potential non-compliance and suspicions promptly upon identification in accordance with the Bank's Risk and Compliance policies. Accurately execute all controls within own area to minimize risk of policy, procedure, and/or regulatory breaches. Identify new risks/control gaps within own area and escalate accordingly to your Line Manager. Main Skills Software analysis and design. SQL Server query language with SSRS. Data warehouse design concepts, (Inmon or Kimball) Experience of developing software with C# Dot Net and and SQL Server is a must. Must have solid experience of working with SSRS and building data warehouses and reporting services. Experience of working with and developing software with Power BI and Python are essential. The Client is a Bank based in the City London. Must have a degree qualification. This is a 12 month FTC position with a salary of circa £65K - £70K. This is a hybrid position - you will be required to be in the office at least 3 days week. Do send your CV to us in Word format along with your salary and availability.
Contexte : Dans le cadre d'un programme stratégique de transformation des SI Achats, notre client recherche un Consultant Senior Data Migration pour piloter la migration des données vers une nouvelle plateforme Procure-to-Pay (P2P). Le consultant interviendra sur la conception fonctionnelle de la migration, la modélisation des données, la gouvernance, la qualité des données ainsi que la coordination entre les équipes métiers et techniques. Missions : · Concevoir les modèles de données cibles et les matrices de mapping (Source-to-Target Mapping). · Définir les règles de gestion, de transformation, d'historisation et de traçabilité des données. · Construire et maintenir le dictionnaire de données et le Data Lineage. · Piloter les différentes phases de migration (préparation, paramétrage, tests, validation et mise en production). · Garantir la qualité, la conformité et la gouvernance des données migrées. · Animer les ateliers avec les équipes Achats, Finance et Data. · Assurer l'interface entre les équipes métiers, Data et développement. · Valider la conformité fonctionnelle des développements. · Concevoir les modèles décisionnels et contribuer aux reportings Power BI. · Définir les indicateurs métiers et assurer la cohérence des données analytiques. Compétences requises : · Migration de données. · Modélisation de données. · SQL. · Data Warehouse. · Source-to-Target Mapping. · Data Lineage. · Gouvernance et qualité des données. · Procure-to-Pay (P2P). · Power BI. · Animation d'ateliers métiers. · Rédaction de spécifications fonctionnelles. Environnement technique : · SQL · Microsoft Fabric · Azure Data Factory · Power BI · Python · Data Warehouse · Self-Service BI
En tant qu'Architecte Data, vous concevez et faites évoluer les plateformes de données de l'entreprise. Vous définissez les architectures cibles, accompagnez les équipes techniques et garantissez des solutions performantes, sécurisées et évolutives répondant aux enjeux métiers. Vos missions : Concevoir des architectures Data modernes (Data Lake, Lakehouse, Data Warehouse, Data Mesh). Définir les stratégies d'ingestion, de transformation et de restitution des données (batch & streaming). Garantir la qualité, la sécurité, la performance et la gouvernance des plateformes. Définir les standards d'architecture, de CI/CD et d'observabilité. Optimiser les performances et les coûts des plateformes (FinOps). Accompagner les équipes Data et participer aux instances d'architecture dans un environnement Agile/SAFe.
