
Job position Tech Lead Data Azure / Databricks
Share this job
Missions principales :
- Conception et développement : Concevoir, développer et maintenir des pipelines ETL/ELT en utilisant PySpark sur Databricks pour traiter de grandes quantités de données.
- Leadership technique : Encadrer une équipe de Data Engineers, assurer la qualité du code, la conformité aux bonnes pratiques et participer aux revues de code.
- Architecture et innovation : Participer à l’architecture des solutions Big Data sur Azure, proposer des optimisations et innovations techniques.
- Gestion de projet : Collaborer avec les Product Owners et autres parties prenantes pour définir les besoins, estimer les efforts et respecter les délais.
- Sécurité et conformité : Garantir la sécurité, la confidentialité et la conformité des données en respectant les standards et réglementations (ex : GDPR).
- Veille technologique : Se tenir informé des évolutions des technologies Big Data, Azure, Python, Spark.
Candidate profile
Technique :
- Maîtrise avancée de Python, PySpark et Spark SQL.
- Expérience solide avec Databricks (notamment notebooks, clusters, jobs).
- Bonne connaissance d’Azure Data Lake, Azure Data Factory, Azure SQL, Azure Blob Storage.
- Connaissance des outils d’orchestration (Airflow, Azure Data Factory).
- Expérience avec les concepts de Data Lake, Data Warehouse, Data Mesh.
- Connaissance des bonnes pratiques DevOps et CI/CD (Azure DevOps, Jenkins).
Working environment
VISIAN est une société de conseil spécialisée autour de l'innovation, la conception produit, le développement et la data.
Dans le cadre de nos projets clients, nous recherchons un Tech Lead Data autour des technologies Azure / Databricks
Apply to this job!
Find your next career move from +9,000 jobs!
-
Manage your visibility
Salary, remote work... Define all the criteria that are important to you.
-
Get discovered
Recruiters come directly to look for their future hires in our CV library.
-
Join a community
Connect with like-minded tech and IT professionals on a daily basis through our forum.
Tech Lead Data Azure / Databricks
VISIAN