Job position Data Ingénieur (30)
Share this job
Notre stack technique est principalement constitué de Python, Spark, SQL pour les traitements de données, Airflow pour l'orchestration et Cloud Storage et Delta lake pour le stockage. La stack inclut aussi les services BigQuery, Dataproc, PubSub et Cloud Storage de la Google Cloud Platform et Terraform et Terragrunt pour la gestion de l'infrastructure.
Prestations attenduesCollecter et centraliser les différentes sources de données non homogènes
Assurer la conformité et la sécurité des données
Participer aux initiatives de gouvernance des données
Participer activement aux différentes phases de conception, de planification et de réalisation des tâches avec l'équipe
Construire et maintenir de pipelines data robustes et scalables
Accompagner les membres de l'équipe dans l'exploitation et le requêtage des données
Organiser et structurer le stockage des données
Mettre en place et maintenir des infrastructures scalables capable de répondre aux besoins et à l'accroissement rapide du volume de données
Construire et maintenir les workflows de la CI/CD
Partager avec les autres data ingénieurs pour appliquer les bonnes pratiques en vigueur
Assurer l'évolutivité, la sécurité, la stabilité des environnements
Participer aux différentes instances des data ingénieurs
Contribuer et veiller à la mise à jour de la documentation
Faire de la veille technologique active dans le domaine
Candidate profile
Au moins 5 ans d'expérience en tant que Data Ingénieur dans un environnement data
Compétences solides en data : structures de données, code, architecture
Expériences dans la conception et la réalisation de pipelines data
Expériences dans un environnement du cloud Google (GCP)
Expériences intégrant BigQuery et Dataplex Universal Catalog
Expériences intégrant les langages Python et SQL
Expériences intégrant Spark
Expériences intégrant delta lake
Expériences intégrant Terraform et Terragrunt
Expériences intégrant Gitlab et Gitlab CI/CD
Expériences intégrant les méthodologies Agile : Scrum ou Kanban
Capacité à vulgariser et à communiquer sur des aspects purement techniques
Working environment
VISIAN est une société de conseil spécialisée autour de l'innovation, la conception produit, le développement et la data.
Dans le cadre de nos projets clients, nous recherchons un Data Ingénieur (30)
Apply to this job!
Find your next career move from +900 jobs!
-
Manage your visibility
Salary, remote work... Define all the criteria that are important to you.
-
Get discovered
Recruiters come directly to look for their future hires in our CV library.
-
Join a community
Connect with like-minded tech and IT professionals on a daily basis through our forum.
Data Ingénieur (30)
VISIAN
