
Offre d'emploi Data Engineer : Databricks / GCP
Vélizy-Villacoublay (78)
OCTOGONE
Partager cette offre
Nous allons travailler sur un POC Réseau Autonome d'une durée limitée (approx 6 mois à partir de septembre), l'objectif est de collecter des données réseaux (données config Radio, Kpi, référentielles) les intégrer dans Databricks, développer des API pour requêter ces données afin que des agent IA puissent requêter les données à travers ces API.
Livrables:
Conception et développement de projets d'intégration de données pour des projets à forte valeur ajoutée.
Développement de jobs d'intégration de données en PySpark, Spark, Python en mode streaming et batch sur la plateforme Databricks.
La mise en œuvre de CI/CD (github, devops, Databricks Bundles), de l'orchestration, du data management et de la sécurité.
Optimisation des jobs et des ressources cloud (GCP et Databricks).
Mise en place de de Dashboard Finops afin de suivre l'usage des ressources GCP / Databricks.
Travailler au sein d'équipes pluridisciplinaires : chefs de projet, architectes, devops, data engineer.
Assurer une formation continue, le partage de connaissances, mise en place de documentation.
Profil recherché
- Maitrise de Databricks : Administration, Gestion des Catalogues, Delta, Optimisation.
- Maîtrise de PySpark, Spark, Python, SQL, GIT.
- Bonne connaissance GCP
- Esprit d'équipe et envie d'apprendre et d'évoluer dans un un environnement collaboratif.
- Excellente capacité à communiquer et à partager vos connaissances.
Environnement de travail
Découvrir OCTOGONE
Postulez à cette offre !
Trouvez votre prochain job parmi +9 000 offres !
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
100% gratuit
Aucune commission prélevée sur votre mission freelance.
Data Engineer : Databricks / GCP
OCTOGONE