Offre d'emploi Data Engineer GCP
Île-de-France
Atlanse
Partager cette offre
En lien avec l’équipe de production applicative / DevOps, vous serez en charge de la mise en œuvre technique des demandes métier dans le cadre du projet DataOps. Vous interviendrez sur l’ingestion, la préparation et la transformation des données ainsi que sur l’évolution des pipelines au sein de l’environnement GCP.
Votre rôle
Ingestion et transformation des données
· Mettre en œuvre de nouvelles ingestions de données dans Cloud Storage et BigQuery
· Développer les traitements de préparation et de transformation des données
· Développer et maintenir les traitements en Python et SQL, notamment avec Pandas et/ou Dask
· Intervenir sur les traitements distribués s’appuyant sur Spark lorsque nécessaire
Développement et évolution des pipelines
· Maintenir et faire évoluer les outils de gestion des pipelines de données
· Développer et maintenir les scripts Bash nécessaires à leur exécution
· Assurer le suivi et l’ordonnancement des traitements avec les outils du périmètre, notamment Control-M
· Analyser et résoudre les problématiques techniques liés aux traitements et aux pipelines
Evolution de la plateforme Data
· Identifier les besoins d’évolution de la plateforme liés aux traitements et pipelines de données
· Rédiger les spécifications techniques nécessaires aux évolutions mises en œuvre
· Formaliser et transmettre à l’équipe DevOps les demandes relatives aux évolutions de la plateforme
________
Profil recherché
Profil recherché
Compétences techniques :
· Excellente maîtrise de GCP, notamment BigQuery et Cloud Storage
· Maîtrise de Python orienté objet, SQL, Pandas et/ou Dask
· Maîtrise du scripting Bash et de Git
· Bonne connaissance des environnements Hadoop et Spark
· Connaissance de Cloud Functions, Control-M et XLD / XLR
· Connaissance de SAS et Alteryx
· Expérience des environnements Agile notamment Scrum
Qualités personnelles :
· Autonomie et capacité à prendre des initiatives
· Capacité d’analyse pour résoudre des problèmes complexes
· Rigueur et aptitude à rédiger des spécifications techniques claires et précises
· Bon relationnel et capacité à travailler en équipe
________
Type de contrat : CDI ou portage ATLANSE
Niveau d’expérience : 3 à 6 ans
Secteur : Banque
Localisation : Charenton Le Pont (94)
Langues : Français et anglais professionnels impératifs
Environnement de travail
Pourquoi nous rejoindre ?
Rejoindre ATLANSE, c’est participer à une merveilleuse aventure dans une société à taille humaine, dynamique et en pleine croissance.
ATLANSE réunit des passionnés de nouvelles technologies qui partagent les mêmes valeurs que sont la diversité, le respect, la curiosité, la confiance, la passion et l’engagement.
ATLANSE favorise l’autonomie et la responsabilisation des collaborateurs pour créer les conditions nécessaires à l’expression du potentiel humain.
Postulez à cette offre !
Trouvez votre prochain job parmi +8 000 offres !
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
100% gratuit
Aucune commission prélevée sur votre mission freelance.
Data Engineer GCP
Atlanse