Job Vacancy Data Engineer GCP & Talend

Au sein de la Data Factory nous recherchons à renforcer notre équipe avec un Data Engineer expérimenté.

Notre Data Factory joue un rôle central dans l'exploitation et l'optimisation des données pour soutenir les différentes initiatives stratégiques de l'entreprise. Nous nous concentrons sur la création d'une infrastructure de données robuste, la mise en place de pipelines de données fiables, et l'exploitation de données pour générer des insights à forte valeur ajoutée pour nos équipes.

Description

 Missions principales

• Analyser les besoins métiers et comprendre les impacts business des données afin de réaliser une conception pertinente et alignée avec les objectifs stratégiques.

• Concevoir et développer des pipelines de données robustes et scalables en utilisant Talend et les services de Google Cloud Platform (BigQuery, DataForm, Dataflow, Pub/Sub, CloudComposer). Vous serez au cœur de la construction d’une infrastructure de données moderne et performante.

• Améliorer la performance et la scalabilité des solutions existantes pour répondre aux besoins stratégiques de l’entreprise.

• Collaborer étroitement avec les architectes, PO et Data Analyst pour garantir la qualité et l’exploitation optimale des données.

• Maintenir une documentation technique précise et complète sur les processus et les solutions implémentés.

• Réalise la recette technique et participe à animer la recette fonctionnelle avec les utilisateurs et le PO

• Mettre en place et gérer des systèmes de monitoring et d’alerting pour assurer une supervision proactive des pipelines et systèmes de données, garantissant leur fiabilité et leur disponibilité.

• Support au déploiement

• Assure la maintenance corrective ou évolutive

• S’assure de la cohérence des livrables avec les règles et bonnes pratiques définies au sein de l’équipe

Livrables

Développements

Cahiers de test/recette

Dossier de recette / Mise en production

Spécifications

Document d'exploitation

Fiche consigne

Compétences

 Compétences techniques requises :

• Langages : Maîtrise de SQL et connaissance de langages comme Python ou Java pour les traitements de données.

• Talend : Solides compétences dans la conception et la gestion des workflows

• GCP : Expérience sur les outils BigQuery, Dataflow, DataForm, Pub/Sub, CoudComposer et d’autres services GCP liés aux données.

• Outils : Familiarité avec des outils de CI/CD comme Git, Jenkins, ou Terraform (serait un plus).