Le poste Data Engineer
Partager cette offre
Le ou la Data Engineer sera intégré(e à l'équipe produit TOPASE NLS et aura pour principales missions de : µ
● Conception, Développement et Optimisation de Pipelines de Données sur GCP :
○ Concevoir, développer et maintenir des pipelines robustes et performants de collecte, transformation et chargement de données à partir de diverses sources (Oracle, fichiers, APIs, etc.) vers BigQuery et d'autres destinations.
○ Utiliser et orchestrer les services Google Cloud Platform (Dataflow, Dataproc, Cloud Composer/Airflow, Pub/Sub, Cloud Storage, BigQuery) pour construire des architectures de données scalables et fiables.
○ Assurer l'automatisation des traitements, la gestion des dépendances et l'ordonnancement des jobs de données.
○ Optimiser les performances des pipelines et la consommation des ressources GCP.
Profil recherché
● Modélisation et Gestion des Données :
○ Participer à la conception et à l'évolution des modèles de données dans BigQuery, en collaboration avec les Data Analysts et les équipes métier.
○ Assurer la qualité, la cohérence et l'intégrité des données stockées et mises à disposition.
○ Mettre en place et gérer des stratégies de versioning des schémas de données et de cycle de vie des données.
Environnement de travail
● Run Opérationnel, Maintenance et Support N2/N3 :
○ Assurer le support opérationnel de niveau 2/3 du produit Topase dans ensemble (GCP + Solution éditeur).
○ Développer et maintenir des scripts Bash pour l'automatisation des tâches opérationnelles, la supervision des flux, l'extraction/transformation de données et les tâches de maintenance système.
...
Postulez à cette offre !
Trouvez votre prochaine mission parmi +10 000 offres !
-
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
-
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
-
100% gratuit
Aucune commission prélevée sur votre mission freelance.
Data Engineer
Coriom Conseil