Contractor job Data Engineer/Architect Apache Iceberg (Marseille 3j)

Cherry Pick est à la recherche d'un Data Engineer/Architect(H/F),  pour le compte de l'un de ses clients qui opère dans le domaine de la fabrication et la commercialisation des drones. 

Dans un contexte de forte croissance des usages data autour de données issues de capteurs drones, la mission vise à concevoir et structurer une plateforme data internalisée, capable d’absorber des volumes importants de données hétérogènes (temps réel et batch), tout en répondant à des enjeux de sensibilité des données clients et de maintenance prédictive.

• Concevoir et mettre en place un Data Lake basé sur une architecture médaillon (Bronze / Silver / Gold)

• Gérer l’ingestion et le stockage de données capteurs drones et de données tabulaires

• Mettre en œuvre une architecture data basée sur Apache Iceberg

• Garantir la disponibilité rapide des données après les vols d’essai

• Participer à la conception d’une brique data autonome, isolable pour les cas de données sensibles clients

• Contribuer à l’internalisation de la plateforme data

• Traiter des pics de charge importants (jusqu’à 10 Go de données arrivant simultanément)

• Collaborer avec les équipes plateforme et data science sur les cas d’usage de maintenance prédictive

• Centraliser et fiabiliser les données drones dans un Data Lake scalable et robuste

• Permettre une exploitation rapide des données post-vol

• Sécuriser et isoler certaines données selon les contraintes clients

• Préparer les données pour des usages avancés (analytique, maintenance prédictive)