Rejoignez une grande maison du secteur du luxe en tant que Data Engineer GCP. Vous intégrerez une équipe moderne et ambitieuse travaillant sur l'infrastructure et l'orchestration de données critiques, dans un environnement cloud-natif structuré autour de Google Cloud Platform. Vous serez en charge de concevoir, développer et maintenir des pipelines de données robustes et performants. Votre expertise en BigQuery, Terraform et DBT sera centrale pour garantir la qualité, la scalabilité et l'efficacité des solutions d'ingestion et de transformation de données. Vous collaborerez étroitement avec les équipes data science et analytics pour fournir des données fiables et bien structurées, tout en contribuant à l'évolution de l'architecture technique et des bonnes pratiques au sein de l'équipe. Le projet s'inscrit dans une démarche d'optimisation et de modernisation de la plateforme de données, en suivant une méthodologie Agile. Vous participerez à des sprints réguliers, contribuerez à la documentation technique et serez impliqué dans les revues de code et les améliorations continues de la base de code. Responsabilités : - Concevoir et développer des pipelines ETL/ELT haute performance en DBT, optimisés pour BigQuery - Gérer l'infrastructure cloud (GCP) en tant que code via Terraform, en respectant les principes d'Infrastructure as Code - Optimiser les requêtes BigQuery et les modèles de données pour performance et coût - Assurer la qualité et la fiabilité des données ingérées et transformées - Documenter les architectures, les processus et les solutions mises en place - Collaborer avec les data analysts et data scientists pour comprendre les besoins métier - Participer aux revues de code et contribuer à l'amélioration continue des pratiques d'équipe - Maintenir et monitorer les pipelines en production, gérer les incidents et les améliorations Télétravail : 2 jours par semaine Localisation : Paris
ContexteDans le cadre du renforcement de notre équipe, nous recherchons un Data Analyst disposant également de compétences en Data Science. La mission consiste à concevoir et produire des analyses de données, des rapports BI sous Power BI et des analyses avancées sur Google Cloud Platform (GCP) afin de répondre aux besoins métiers et de développer de nouveaux usages autour de la Data. Compétences recherchéesPower BI – maîtrise indispensable Google Cloud Platform (GCP) BigQuery DBT Cloud Composer Data Analysis / Business Intelligence Compétences en Data Science / analyses avancées Profil recherchéNous recherchons un profil capable de faire le lien entre les besoins métiers, l'analyse des données et la restitution BI, avec une bonne maîtrise de l'environnement GCP. Une expérience significative sur Power BI, BigQuery, DBT et Cloud Composer est fortement attendue.
Dans le cadre de la réalisation d'un projet en assistance technique, nous recherchons un(e) Data Engineer pour l'un de nos clients du secteur aéronautique. Vous interviendrez sur le site client situé dans les Hautes-Pyrénées (65). Vos missions seront les suivantes : - Développer des évolutions de notre plateforme permettant de récolter et distribuer les données d'activité en vue de permettre la construction de produits de données : .dbt ; snowflake ; power BI ; streamlit : azure ; - Réaliser des travaux de data engineering (scriptes, modélisations, …) pilotés en DevOps (via la solution Azure DevOps) par le Lead Data Engineer du périmètre concerné ; - Compléter toutes les documentations IT obligatoires : CDM, HLD (high level Design du système), DAT (dossier d'architecture technique), DEX (dossier d'exploitation) ; - Prendre en charge et corriger des incidents liés à ces composants après livraison.
Bonjour, Pour le compte de l'un de mes clients dans le secteur du cosmétique, je suis à la recherche d'un Data Engineer Snowflake en recrutement sur mission. Nous recherchons un ingénieur de données (Data Engineer) possédant une solide expérience pratique de Snowflake et du développement SQL avancé. Le candidat idéal concevra & développera des solutions de données, tout en garantissant la qualité, la performance et l'évolutivité des données au sein des plateformes d'analyse et de Business Intelligence. Les responsabilités souhaitées : Développer et maintenir des modèles de données, des transformations et des pipelines de données en utilisant dbt & Snowflake. Écrire du code SQL avancé et optimisé pour gérer une logique métier complexe et des volumes de données importants. Concevoir des architectures de données évolutives garantissant haute performance et fiabilité. Collaborer avec les analystes de données, les data scientists et les parties prenantes métier pour fournir des données propres, fiables et structurées. Mettre en place des contrôles de qualité des données, la documentation et le contrôle de version pour les projets dbt. Surveiller les performances des pipelines de données et résoudre les problèmes de manière proactive. Participer à l'amélioration continue des meilleures pratiques en ingénierie des données.
Nous recherchons pour une entreprise de renommée française spécialisée dans le secteur de la santé, un Data Analyst Confirmé H/F en CDI sur Lyon. La mission consiste à mettre en place, modéliser et implémenter un business process partir de documents, artefacts et dashboards déjà existants Doté(e) d'un "Product Mindset", vous serez amené a faire le pont entre les équipes métiers, les process et la data. Vous serez en charge de: • Analyser les documents, artefacts, données et dashboards • Echanger de manière transverse avec les équipes métiers et data • Clarifier et formaliser les Business Process • Construire les maps et modèles de process • faire le lien entre les processus métiers et données disponibles • concevoir et implémenter les data modèles dans snowflakes et DBT • définir et suivre les KPIs qui permettent de monitorer les processus • traduire les dashboards en insight business • Identifier les gaps, anomalies et points de blocage Référence de l'offre : hx9hfbjt40
🎯 MISSIONS : Intégré(e) aux équipes d'un de nos clients grands comptes, vos missions seront les suivantes : Définition des spécificités techniques avec l'ensemble des parties prenantes Définition de l'architecture des applications Rédaction de la documentation technique Optimisation des applications existantes Développement de nouvelles fonctionnalités. Mise en place de la méthodologie de développement (TDD, BDD) et des processus d'intégration continue pour chaque projet : du développement jusqu'à la livraison Mise en place se l'environnement de développement et du socle technique Être le référent technique sur les projets de développement : suivi du projet, cohérence des technos et des méthodes utilisées, qualité du code,... Détecter, analyser et corriger les éventuels problèmes (sécurité, performances, etc.) Sensibiliser l'équipe aux bonnes pratiques de développement : transfert de compétences, méthodologie, sécurité,... Réaliser de la veille technologique pour améliorer en continue les pratiques Participation aux différentes instances de suivi de projet Technos : Backend : Java, Spring Boot, Oracle DB JUnit, PostgreSQL, DBT, Spring Batch... Frontend : JavaScript, Angular, ReactJS, TypeScript DevOps : Sonar, Git, Gitlab, Jira, Docker / Kubernetes, ELK, Grafana, Maven,...
Dans le cadre du renforcement d'une équipe Data, nous recherchons un(e) Data Engineer pour intervenir sur une plateforme Data à fort volume, au sein d'un environnement international et orienté produit. Vous rejoindrez une équipe technique en charge de construire, industrialiser et faire évoluer des solutions permettant de collecter, transformer, fiabiliser et exposer la donnée à destination des équipes Data et métiers. L'environnement repose sur une Modern Data Stack, avec une architecture de type Lakehouse, et de forts enjeux autour de la scalabilité, de l'automatisation et de la qualité des données. Vos missionsConcevoir, développer et maintenir des pipelines de données robustes et scalables. Collecter, transformer et mettre à disposition des données provenant de différentes sources. Développer des traitements en Python / PySpark / SQL. Orchestrer les pipelines de données et les workflows avec Airflow. Participer à la modélisation et à la structuration des données. Développer et maintenir les transformations avec dbt. Mettre en place des contrôles permettant de garantir la qualité et la fiabilité des données. Optimiser les performances et les coûts des traitements. Participer à l'amélioration continue de la plateforme Data. Contribuer aux sujets de Data Governance, Data Lineage et Data Contracts. Appliquer les bonnes pratiques de Software Engineering : Git, GitHub, CI/CD, tests et documentation. Travailler en étroite collaboration avec les Data Engineers, Analytics Engineers, Data Analysts et Data Scientists. Environnement techniqueCloud : AWS / GCP Data Platform : Databricks, S3 Processing : Spark / PySpark Langages : Python, SQL, idéalement Scala Orchestration : Airflow Transformation : dbt Data Quality : Great Expectations Versioning / Delivery : Git, GitHub, CI/CD Data : Lakehouse, Data Lineage, Data Governance, Data Contracts Méthodologies : Agile / Scrum / Kanban
La mission consiste à : - Exposer les données utiles à l'entreprise pour les analyser et les utiliser afin d'améliorer l'expérience utilisateur et la productivité - Transformer des données issues du DataLake afin de les normaliser - Modéliser la sphère de données - Développer les flux - Exposer des données brutes et/ou agrégées au bon niveau de granularité aux différents métiers de l'entreprise - Travailler en lien avec des Data Scientists sur les données qu'il aura exposées - Mettre en place des rapports de Dataviz - Mission basée en métropole lilloise avec présence sur site 3j/semaine obligatoire Compétences demandées : - Formation supérieure en école d'ingénieur, école d'informatique ou Master spécialisé dans la Data Science - Première expérience en Data Engineering indispensable - Snowflake, GCP, BigQuery, DBT, SQL, Semarchy, Airflow, Python ... - Excellents savoir-être : rigueur, esprit analytique et de synthèse, communication... - Méthode Agile - Anglais
Missions principales • Définir la stratégie, la roadmap et le modèle opérationnel de la Data Platform. • Garantir disponibilité, performance et fiabilité de la plateforme. • Piloter les évolutions Snowflake et Power BI Cloud. • Mettre en place les standards d'architecture, de gouvernance et de Data Products. • Développer les capacités Self-Service Analytics. • Coordonner les équipes internes et les partenaires externes. • Accompagner la transformation vers un modèle orienté produit. • Assurer la sécurité et la conformité (GDPR, DORA, IAM, RBAC, Data Masking). Compétences clés Snowflake, Power BI Cloud, Azure, dbt, Data Engineering, Data Governance, Data Architecture, Platform Engineering, DevOps Data, Spark, FinOps, Data Products
