Job Vacancy Data Engineer Databricks

Concevoir, développer et maintenir des applications et traitements de données sur la plateforme Databricks.

Développer des pipelines de données robustes et industrialisés en Python, PySpark et SQL.

Participer à la modélisation et à l'optimisation des traitements de données.

Mettre en œuvre les bonnes pratiques de développement, de tests et d'intégration continue (CI/CD).

Contribuer à l'administration fonctionnelle de la plateforme Databricks (catalogues, espaces de travail, gouvernance des données).

Participer à la mise en œuvre des nouvelles fonctionnalités de la plateforme, notamment la création et la configuration de Databricks Genie Spaces afin de faciliter l'accès aux données par les équipes métiers.

Collaborer avec les équipes Data, Architecture et Métiers afin de garantir la qualité, la performance et la disponibilité des solutions développées.

Participer aux revues de code, aux ateliers techniques et aux réflexions autour de l'évolution de la plateforme Data.

Compétences techniques

• Databricks

• Python

• PySpark

• Spark SQL

• Delta Lake

• Git

• Méthodologies Agile (Scrum)

  Appréciées

  • Unity Catalog

  • Databricks Workflows

  • CI/CD (Azure DevOps, GitHub Actions ou équivalent)

  • Azure Data Factory ou outil d'orchestration similaire

  • Databricks Genie Spaces

  • Connaissance des services IA proposés par Databricks (Mosaic AI, MLflow, Vector Search)

Formation supérieure en informatique ou en Data.

Expérience significative en développement de solutions Data sur Databricks.

Maîtrise des environnements Big Data et des architectures de traitement distribuées.

Bonne culture des bonnes pratiques de développement logiciel et d'industrialisation.

Capacité à évoluer dans un environnement agile et international.

Esprit d'équipe, autonomie et forte sensibilité à la qualité des développements.