Job Vacancy Data Engineer

Expertises demandées pour la réalisation de la prestation :

•            Au moins 5 ans d’expérience en tant que Data Ingénieur dans un environnement data

•            Compétences solides en data : structures de données, code, architecture

•            Expériences dans la conception et la réalisation de pipelines data

•            Expériences dans un environnement du cloud Google (GCP)

•            Expériences intégrant BigQuery et Dataplex Universal Catalog

•            Expériences intégrant les langages Python et SQL

•            Expériences intégrant Spark

•            Expériences intégrant delta lake

•            Expériences intégrant Terraform et Terragrunt

•            Expériences intégrant Gitlab et Gitlab CI/CD

•            Expériences intégrant les méthodologies Agile : Scrum ou Kanban

•            Capacité à vulgariser et à communiquer sur des aspects purement techniques

La Direction Technique du Numérique mène des projets transverses en étroite collaboration avec les autres directions, notamment la direction Data. La Direction Data, au sein de la Direction du Numérique, a été créée avec la volonté de faire de la Data un levier de croissance des offres numériques.

La Direction Data a 3 grandes missions : maximiser la collecte de données tout en respectant les réglementations en vigueur, développer la connaissance et l’expérience utilisateurs et mettre à disposition auprès des équipes internes des outils de pilotage et d’aide à la décision.

Au sein de l’équipe, la prestation se déroulera en collaboration avec les autres équipes de la Data, au coeur de la plateforme Data. Cette équipe est composée d’un product owner, d’un data steward et de deux autres data ingénieurs.

Notre stack technique est principalement constitué de Python, Spark, SQL pour les traitements de données, Airflow  pour l’orchestration et Cloud Storage et Delta lake pour le stockage. La stack inclut aussi les services BigQuery, Dataproc, PubSub et Cloud Storage de la Google Cloud Platform et Terraform et Terragrunt pour la gestion de l’infrastructure.

Prestation de cette équipe :

1.           Collecter et centraliser les différentes sources de données non homogènes

2.           Assurer la conformité et la sécurité des données

3.           Participer aux initiatives de gouvernance des données