Le poste Data Engineer Python
Partager cette offre
Missions :
Développer et maintenir des produits data avec des contrats clairement définis.
Concevoir et maintenir des pipelines de données batch et event‑based.
Construire des pipelines Polars hautement performants.
Supporter et optimiser des workflows à grande échelle sur Databricks.
Mettre en place des processus robustes d'ingestion, de transformation et de validation des données, en visant performance, scalabilité et résilience.
Garantir une haute qualité de données grâce à des validations et des tests automatisés.
Gérer les composants de stockage et data lake de Azure Cloud conformément aux standards internes.
Contribuer à l'automatisation CI/CD GitLab et assurer une haute qualité du code Python produit.
Compétences :
Forte expertise en Python (clean architecture, performance, tests).
Expérience dans la création de data pipelines en Python.
Expérience avec des bibliothèques de traitement de données : Polars, Pandas, Databricks, DBT, etc.
Maîtrise d'outils d'orchestration de workflows : Prefect, Airflow, Dagster… Solide compréhension du data modeling et du design de schémas. Connaissance des bonnes pratiques d'ingénierie logicielle : CI/CD, code review, tests automatisés…
Soft skills :
Excellentes compétences en résolution de problèmes, autonomie, envie d'apprendre.
Forte attention portée à la qualité et à la fiabilité des données.
Aisance dans des environnements d'ingénierie collaboratifs.
Capacité à documenter et communiquer clairement des concepts techniques.
Les compétences techniques priment sur le nombre d'années d'expérience.
2J TT/semaine
Compétences techniques requises :
Python
Azure Databricks
CICD
Pandas
GitLab
Profil recherché
Missions :
Développer et maintenir des produits data avec des contrats clairement définis.
Concevoir et maintenir des pipelines de données batch et event‑based.
Construire des pipelines Polars hautement performants.
Supporter et optimiser des workflows à grande échelle sur Databricks.
Mettre en place des processus robustes d'ingestion, de transformation et de validation des données, en visant performance, scalabilité et résilience.
Garantir une haute qualité de données grâce à des validations et des tests automatisés.
Gérer les composants de stockage et data lake de Azure Cloud conformément aux standards internes.
Contribuer à l'automatisation CI/CD GitLab et assurer une haute qualité du code Python produit.
Compétences :
Forte expertise en Python (clean architecture, performance, tests).
Expérience dans la création de data pipelines en Python.
Expérience avec des bibliothèques de traitement de données : Polars, Pandas, Databricks, DBT, etc.
Maîtrise d'outils d'orchestration de workflows : Prefect, Airflow, Dagster… Solide compréhension du data modeling et du design de schémas. Connaissance des bonnes pratiques d'ingénierie logicielle : CI/CD, code review, tests automatisés…
Soft skills :
Excellentes compétences en résolution de problèmes, autonomie, envie d'apprendre.
Forte attention portée à la qualité et à la fiabilité des données.
Aisance dans des environnements d'ingénierie collaboratifs.
Capacité à documenter et communiquer clairement des concepts techniques.
Les compétences techniques priment sur le nombre d'années d'expérience.
2J TT/semaine
Compétences techniques requises :
Python
Azure Databricks
CICD
Pandas
GitLab
Environnement de travail
DGTL / Signe + est le facilitateur pour tous les acteurs qui recherchent des ressources ou des missions DATA.
Spécialiste du marché Data et BI, nous intervenons dans toute la France comme à l'étranger ; en sous-traitance, pré-embauche, recrutement, portage commercial, portage salarial, etc.
Depuis 2018, nous accompagnons nos clients avec proximité, juste prix et préoccupation éthique de tous les instants.
-lien masqué-
Postulez à cette offre !
Trouvez votre prochaine mission parmi +10 000 offres !
-
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
-
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
-
100% gratuit
Aucune commission prélevée sur votre mission freelance.
Data Engineer Python
Signe +