Job position Data Engineer Python/DBT
Share this job
Ton quotidien chez Komeet sera rythmé par :
Animation des ateliers afin d’étudier et cadrer les besoins clients
Préconisation, conception et mise en œuvre des plateformes Data (datawarehouse, datalake/lakehouse )
Rédaction de dossiers d’architecture et spécifications techniques
Mise en œuvre des stratégies d’exploitation de plateformes Data
Construction et déploiement des pipelines de données (ETL / ELT) à l’aide de langage de programmation ou d’outils de type Low-Code
Mis en œuvre des flux d’intégration (en batch ou streaming) de données structurées/non structurées et volumineuses.
Tests, validation et documentation des développements
Réalisation d'audits et projets d’optimisation
Nos choix technologiques :
- Talend
- DataBricks
- Snowflake
- DBT
- Starburst
- Tableau / Power BI / Looker
- AWS, Azure et GCP
Candidate profile
Tu corresponds au/à la Data Engineer Python/DBT que nous recherchons si :
Tu possèdes une expérience significative en développement Python appliqué à l'ingénierie de données (+3 ans)
Tu maîtrises dbt (data build tool) et as une expérience concrète dans l'implémentation de transformations de données avec cet outil
Tu possèdes une solide expérience en SQL et en modélisation de données relationnelles et dimensionnelles
Tu as une bonne connaissance de Databricks ou d'une plateforme de données moderne similaire (Snowflake, BigQuery)
Tu maîtrises au moins un Cloud Provider (AWS, Azure, GCP) et leurs services data (S3, ADLS, BigQuery, etc.)
Tu as de l'expérience avec les outils d'orchestration (Airflow, Prefect, ou équivalent)
Tu maîtrises les bonnes pratiques DevOps : Git, CI/CD, tests unitaires, et déploiement automatisé
Tu connais les principes de l'architecture médaillon (Bronze/Silver/Gold) et les data design patterns
Tu es sensible à la qualité des données et aux pratiques de data testing
Tu sais travailler en équipe dans un contexte Agile/Scrum et communiquer efficacement avec les parties prenantes
Tu es rigoureux, autonome, et soucieux de la documentation de tes développements
Tu as un esprit analytique et sais proposer des améliorations techniques
Ton quotidien chez Komeet sera rythmé par :
Développement et maintenance des pipelines de données en Python sur la stack Databricks
Implémentation des transformations de données avec dbt (modèles, tests, documentation)
Création et optimisation de requêtes SQL complexes pour les transformations de données
Mise en œuvre des flux d'ingestion de données batch et streaming depuis diverses sources
Implémentation des couches Bronze, Silver et Gold selon l'architecture médaillon
Développement et maintenance des tests de qualité de données (dbt tests, Great Expectations)
Monitoring et debugging des pipelines de données, résolution des incidents
Collaboration avec les Data Analysts et Data Scientists pour comprendre leurs besoins
Rédaction de documentation technique et fonctionnelle des développements
Participation aux code reviews et à l'amélioration continue des pratiques d'équipe
Optimisation des performances des requêtes et des pipelines pour réduire les coûts
Mise en place et amélioration des processus CI/CD pour les projets data
Support et formation des utilisateurs métiers sur l'utilisation des données transformées
Working environment
Nous sommes Komeet Technologies👋 Avec l’ensemble des Komeeters, nous bâtissons : le prochain leader de la Data en France !
Komeet vous accompagne sur l’ensemble de la chaîne de valeur de la data : Stratégie, Gouvernance et Data Management, Architecture et Infra, Data Engineering et Analytics.
5 valeurs nous réunissent :
🧑🤝🧑Le Kollectif : on le cultive et nous lui allouons du temps : 5 jours Kommunautaires (jour de destaffing)
👷 MaKers : nous sommes formés à la réalisation, l’engagement du Delivery !
⛓️ Indépendance : partenaire des leaders et des spécialistes, agnostique des clouds providers principaux
💍 Engagement : le Kodir vers tous les Komeeters, les Komeeters envers tous nos clients : 10% des revenus de Komeet sont redistribués à l’ensemble des collaborateurs, à parts égales et peu importe leur niveau hiérarchique.
🏖️ Équilibre Pro - Perso : Parce qu’on aime ce qu’on fait, mais que l’on a beaucoup d’autres passions aussi, tous les Komeeters ont 6 semaines de congé.
Notre métier :
Stratégie et Gouvernance Data :
- Concevoir la stratégie data la plus appropriée à votre organisation en phase avec vos objectifs métiers.
- Décliner opérationnellement cette stratégie pour mettre en place l’organisation, les compétences et les processus associés.
Pilotage et agilité :
- Accompagner vos métiers et vos équipes en tant que Scrum Master et Product Owner.
- Piloter vos projets, vos centres de services et de compétences Data.
Data Platform :
- Concevoir, construire et industrialiser les plateformes Data dans une démarche DevOps.
- Garantir la qualité et la sécurité de vos données
Data Valorisation
- Exploiter vos données pour en tirer de la valeur.
- Mettre en place des solutions d’Analytics et d’IA pour répondre aux enjeux de vos métiers.
Follow --- Le BLOG de Komeet, le Kollectif y rédige des trucs cool sur la data 🤘
Apply to this job!
Find your next job from +10,000 jobs!
-
Manage your visibility
Salary, remote work... Define all the criteria that are important to you.
-
Get discovered
Recruiters come directly to look for their future hires in our CV library.
-
Join a community
Connect with like-minded tech and IT professionals on a daily basis through our forum.
Data Engineer Python/DBT
KOMEET TECHNOLOGIES
