Job Vacancy Ingénieur Data - Média

Les livrables sontCode Source
Documentation
KPI qualitéCompétences techniquesDatabricks - Expert - Impératif
Spark SQL - Expert - Impératif
Azure Data Factory - Confirmé - Important
Scala - Confirmé - Souhaitable

Connaissances linguistiquesFrançais Courant (Impératif)

Description détailléeContexte :
Le projet Data PUB - Digital vise à centraliser et harmoniser l'ensemble des données relatives à la diffusion publicitaire digital (impressions, chiffre d'affaire etc) pour permettre un reporting fiable selon différentes dimensions (canal de vente, origine, équipes commerciales, annonceurs etc) et garantir une vision unifiée de la performance digitale.

Environnement technique :
Azure Data Factory, Databricks, Spark Scala, SQL, Azure DevOps et Power BI.

Missions :
- Concevoir et développer des pipelines d’ingestion de données via Azure Data Factory.
- Développer et optimiser des flux de transformation de données en Spark SQL.
- Maintenir des pipelines de traitement de données en Scala (faible part)
- Maintenir et développer de nouveaux indicateur de qualité de données
- Participer au refactoring du code existant pour améliorer sa performance et sa maintenabilité (réécriture en DBT)
- Garantir la qualité du code et veiller au respect des normes de développement au sein de l’équipe.
- Implémenter des tests unitaires et assurer la fiabilité des solutions.
- Maintenir les solutions de monitoring de l’application Digital.