Offre d'emploi Data Engineer Python / Airflow – Lyon
Lyon (69)
Datapy
Partager cette offre
Nous recherchons un Data Engineer pour rejoindre une équipe intervenant dans le secteur de l’énergie.
Vos missionsReprendre, analyser et améliorer des flux Data existants.
Améliorer la supervision, la fiabilité et le monitoring des pipelines.
Challenger les solutions existantes et proposer des axes d'amélioration.
Participer à la migration progressive des flux vers Apache Airflow.
Développer et refondre certains traitements en Python.
Mettre en place une gestion robuste des logs, erreurs et retries.
Participer au MCO et à la résolution des incidents.
Contribuer à l'automatisation et à l'industrialisation des pipelines.
Collaborer avec les équipes techniques et métier dans un fonctionnement Agile.
Profil recherché
Très bonne maîtrise de Python.
Expérience confirmée sur Apache Airflow.
Bon niveau en SQL et PostgreSQL.
Expérience en supervision et monitoring de pipelines.
Connaissances en CI/CD et DevOps appréciées.
Capacité à comprendre des flux existants et à proposer des solutions adaptées.
Environnement de travail
Vous intégrerez une équipe Data composée d’environ 6 à 7 développeurs, travaillant principalement sur des technologies SQL et NiFi, ainsi qu’avec un Product Owner et un référent technique.
L’équipe fonctionne en méthode Agile, avec des sprints de 2 semaines, des rituels de suivi, des rétrospectives et la gestion d’un backlog.
Vous interviendrez dans un contexte de maintien en conditions opérationnelles (MCO) et d’amélioration continue, avec pour objectif de faire évoluer progressivement les flux existants vers une architecture davantage orientée Python et Apache Airflow.
L’environnement technique comprend notamment : Python, Apache Airflow, SQL, PostgreSQL, NiFi, API REST, CI/CD et outils de supervision/monitoring.
Postulez à cette offre !
Trouvez votre prochaine mission parmi +8 000 offres !
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
100% gratuit
Aucune commission prélevée sur votre mission freelance.
Data Engineer Python / Airflow – Lyon
Datapy