Le poste Data Engineer Databricks TJM max 600
Partager cette offre
Concevoir et développer des pipelines de données sur Databricks (PySpark, Spark SQL, Delta Live Tables).
Mettre en place des architectures Lakehouse basées sur Delta Lake.
Industrialiser les workflows ETL/ELT avec Databricks Workflows.
Administrer les environnements Databricks (workspaces, clusters, permissions).
Optimiser les coûts via la configuration, l'autoscaling et le monitoring des clusters.
Mettre en œuvre les bonnes pratiques de sécurité (Unity Catalog, gestion des accès, lineage).
Déployer des mécanismes de contrôle qualité et de validation des données (expectations, tests).
Documenter les modèles de données et les flux.
Garantir la fiabilité, la disponibilité et la fraîcheur des données.
Collaborer avec les équipes Data, Analytics, IA et les métiers.
Accompagner les utilisateurs dans l'adoption de la plateforme Databricks.
Participer aux revues de code, à la standardisation des développements et au partage des bonnes pratiques.
Excellente maîtrise de PySpark et/ou Spark SQL.
Expérience significative sur Databricks (pipelines, notebooks, clusters, Unity Catalog).
Bonne connaissance des architectures Lakehouse.
Solides compétences en ETL/ELT, modélisation de données et ingestion batch/streaming.
Expérience sur un environnement Cloud (Azure, AWS ou GCP).
Maîtrise de Git et des outils de CI/CD (Azure DevOps, GitHub Actions ou équivalent).
Connaissances de MLflow et des pratiques MLOps.
Sensibilité aux approches DataOps, à l'optimisation des coûts et au monitoring.
Expérience avec les APIs et les flux temps réel (Kafka ou technologies similaires).
Bac+5 en informatique, data ou équivalent.
2 à 5 ans d'expérience en Data Engineering, avec une expertise sur Databricks.
Esprit d'équipe, autonomie, rigueur, bonnes capacités de communication et goût pour la documentation.
Profil recherché
Bac+5 en informatique, data ou équivalent.
2 à 5 ans d'expérience en Data Engineering, avec une expertise sur Databricks.
Esprit d'équipe, autonomie, rigueur, bonnes capacités de communication et goût pour la documentation.
Environnement de travail
Postulez à cette offre !
Trouvez votre prochaine mission parmi +9 000 offres !
-
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
-
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
-
100% gratuit
Aucune commission prélevée sur votre mission freelance.
Data Engineer Databricks TJM max 600
Craftman data