Le poste Data engineer databricks
Partager cette offre
Le data engineer intègre une équipe en charge du lakehouse. De nombreuses challenges techniques sont attendus, la maitrise de l'outil DATABRICKS est un pre requis.
Focus sur ses activités :
-Contribue à la conception de outils de traitement BigData (Ingestion / Traitement / Analyse)
-Cadrage technique des besoins émis par les consommateurs de la plateforme Data
-Est garant de la mise en production des traitements au sein de la plateforme
-Optimisation du code et de la capacité des VMs mise en œuvre pour chaque traitement
-Garantit la disponibilité et l'outillage pour les équipes métier, ainsi qu'aux utilisateurs de la plateforme (data scientists / data analystes / data engineer)
-Est en relation avec les équipes infrastructure afin d'assurer le cadrage et le déploiement des solutions valides
-Support aux équipes consommatrices
-Analyse d'anomalie et proposition solution court / moyen terme
- Developpement sous Databrick (Python / SQL / Spark / Airflow)
-Est force de propositions techniques, en capacité de faire un état des lieux sur les normes et process de devt et faire appliquer les recommandations.
Profil recherché
Un data engineer expérimenté est recherché pour travailler au sein du COE Data en charge de la nouvelle Data Platform : il s'agit d'un lakehouse (AWS + Databricks).
Une équipe centralisée gère la plateforme mais de nombreux équipes travaille également sur le nombreux uses cases (fonctionnement Data Mesh).
Toutes les équipes fonctionnement en mode agile.
La Data Platform est en pleine expansion avec de très nombreux uses cases, et services à déployer.
Environnement de travail
Autonome et Responsable
Avancé (5 à 7 ans inclus)
Connaissance cloud AWS
Confirmé (2 à 4 ans inclus)
Developpement sur les techno Big Data
Avancé (5 à 7 ans inclus)
Expérience de projets mais aussi MCO, support, expertise
Avancé (5 à 7 ans inclus)
Python + SQL + Spark
Avancé (5 à 7 ans inclus)
Databricks + Airflow
Avancé (5 à 7 ans inclus)
Postulez à cette offre !
Trouvez votre prochaine mission parmi +15 000 offres !
-
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
-
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
-
100% gratuit
Aucune commission prélevée sur votre mission freelance.
Data engineer databricks
VISIAN
