Find your next tech and IT Job or contract Apache Airflow

59 results
Permanent
Contractor

Job VacancyTech Lead DevOps & Data Platform - F/H

INGENIANCE
Published on
Apache Airflow
Azure
Azure Data Factory

1 month
Paris, France
Nous recherchons pour une mission longue chez notre client secteur banque/finance en région parisienne un Tech Lead pour structurer et faire évoluer une plateforme de données cloud au service d'activités de financement et de marché. Vous êtes le référent technique : vous cadrez l'architecture, guidez les équipes et livrez en production. Vos missions : - Concevoir l'infrastructure AWS de la plateforme de données en Infrastructure as Code avec Terraform. - Mettre en place les pipelines CI/CD (GitLab, GitHub Actions), les environnements et les déploiements automatisés avec gestion du rollback. - Déployer le monitoring et l'observabilité : logs, métriques, alertes. - Concevoir l'orchestration des pipelines de données (Airflow, Astronomer, Dagster) et les workflows ETL/ELT. - Intégrer un cadre de data quality : règles de validation, contrôles, tableaux de bord et alertes. - Construire un modèle self-service avec templates réutilisables, documentation et onboarding automatisé. - Appliquer les exigences de sécurité et de conformité bancaire : contrôle d'accès, traçabilité, data lineage. - Former et accompagner les équipes sur les bonnes pratiques DevOps et data. Vous rejoignez Ingéniance en CDI cadre, au sein d'une communauté d'experts de la banque et de la finance. Démarrage dès que possible. Ref : O-TDCOI
View this job
Contractor
Permanent
Fixed term

Job VacancyData Airflow expert

Craftman data
Published on
Apache Airflow
AWS Cloud
AWS Cloudwatch

1 year
Sochaux, Bourgogne – Franche-Comté
Mission: Renforcement de l'équipe Data Platform , avec un profil Lead Data Orchestration Engineer spécialisé sur Apache Airflow et AWS MWAA. Contexte de la mission La plateforme d'orchestration Airflow MWAA (version 2.10.3) gère des pipelines de données bancaires à travers 9 pays européens. Un audit technique approfondi a été conduit début 2026, suivi d'une phase de remédiation qui a permis de stabiliser les fondations. La mission porte aujourd'hui sur la phase d'optimisation et de sécurisation durable de la plateforme : passage à l'échelle, renforcement de l'observabilité, étude d'une infrastructure cible plus adaptée, et montée en compétence des équipes. Objectifs de la mission La mission se structure autour de quatre axes : Axe 1 — Optimisation architecturale Optimiser et faire évoluer les mécanismes d'orchestration existants pour permettre le passage à l'échelle et réduire les coûts d'exploitation (temps de résolution d'incidents, effort d'ajout de nouveaux pays). Axe 2 — Sécurisation et résilience Renforcer la robustesse de la plateforme face à la charge et aux défaillances : observabilité de bout en bout, politique de rotation des secrets, isolation des flux, capacité de reprise automatique. Axe 3 — Étude et migration vers une infrastructure cible L'audit a mis en évidence les limites structurelles d'AWS MWAA pour nos besoins (contraintes de scaling, manque de flexibilité sur la configuration, coûts). Le Lead Data Orchestration Engineer devra étudier les alternatives (Airflow auto-hébergé sur ECS/EKS, Astronomer, Dagster, Prefect, ou autre solution adaptée à nos process) et piloter la migration vers l'infrastructure retenue si pertinent. Axe 4 — Autonomie des équipes Former et structurer les équipes Dev et Ops pour qu'elles puissent opérer, diagnostiquer et faire évoluer la plateforme en autonomie sur le long terme. Profil recherché Séniorité : 5 ans d'expérience minimum sur Apache Airflow, dont une expérience significative en environnement managé (AWS MWAA ou Google Cloud Composer). Compétences techniques requises : Maîtrise du modèle d'exécution Airflow : scheduler, executor, pools, triggers, deferrable operators Expérience de tuning et d'optimisation de plateformes Airflow à l'échelle (200+ DAGs en production) Expertise AWS : MWAA, SQS, SNS, Secrets Manager, CloudWatch, IAM Connaissance d'alternatives à MWAA : Airflow sur ECS/EKS, Astronomer, ou orchestrateurs modernes (Dagster, Prefect) — expérience de migration d'un orchestrateur vers un autre fortement appréciée Expérience avec des DAG Factories dynamiques (génération de DAGs à partir de configurations) — capacité à faire évoluer et optimiser une factory existante Patterns de résilience : retry strategies, Dead Letter Queues, circuit breakers, isolation des flux Observabilité : métriques, dashboards, alerting, routage d'incidents par criticité Python avancé (plugins custom, operators, sensors) Infrastructure as Code (Terraform) — connaissance souhaitée Compétences transverses : Capacité à concevoir et faire appliquer des standards techniques (code reviews, patterns, conventions) Expérience de mentorat et de transfert de compétences auprès d'équipes mixtes (Dev + Ops) Capacité à piloter un programme d'optimisation technique (priorisation, suivi, reporting) Autonomie et force de proposition Missions principales Axe 1 — Optimisation architecturale Faire évoluer la DAG Factory existante : enrichissement, patterns avancés, maintenabilité Piloter la migration des dépendances inter-DAGs vers des mécanismes natifs Airflow (Datasets) Optimiser les performances au parse-time et runtime (mise en cache, suppression des appels coûteux) Mettre en place la validation automatisée des DAGs en CI/CD (parse test, linting, tests d'intégration) Axe 2 — Sécurisation et résilience Implémenter une politique de rotation des secrets Mettre en place le routage différencié des alertes par type d'incident et par criticité Piloter le capacity planning et le tuning de la plateforme (pools, scaling, rétention logs) Renforcer l'isolation réseau et le durcissement de la configuration Finaliser et maintenir les runbooks d'incidents (classification, escalade, post-mortem) Axe 3 — Étude et migration vers une infrastructure cible Réaliser un benchmark des alternatives à AWS MWAA au regard de nos contraintes (multi-pays, volumétrie, séparation Dev/Ops, coûts) Produire une recommandation argumentée avec analyse coûts/bénéfices, risques de migration, et plan de transition Piloter la migration vers l'infrastructure retenue (POC, migration progressive, bascule production) Garantir la continuité de service pendant la transition Axe 4 — Autonomie des équipes Lancer et piloter le programme de formation sur l'orchestration (Dev + Ops, ~10 personnes) Constituer la méta-équipe plateforme (vision unifiée Dev + Ops sous un leadership technique commun) Accompagner l'évolution des profils Dev → Data Engineers et Ops → DataOps Évaluer l'internalisation progressive de profils techniques clés Compétences techniques
View this job
Contractor

Contractor jobData Engineer GCP / Dataiku DSS Confirmé / Senior - Freelance (H/F)

█ █ █ ██ █ █
Published on
Apache Airflow
Confluence
Data Engineering

Paris, France

Imported from

Job from the tech market, identified automatically to give you a complete view of the opportunities.

Restricted access to the community

Join our platform to access the details of this job and get access to the best offers on the market.

View this job
Contractor
Permanent

Job VacancyDéveloppeur OPS Infrastructure as Code

VISIAN
Published on
Apache Airflow
Go (language)
Python

1 year
Ile-de-France, France
ContexteLa squad Server, au sein d'une grande entreprise du secteur bancaire et financier, a pour mission d'exposer et d'orchestrer des produits "Server", majoritairement des solutions de virtualisation d'OS, pour les usages du groupe. Elle permet le provisionnement et la gestion d'une gamme étendue de produits répondant à des besoins métiers variés. Plusieurs solutions existantes vont être rapprochées via l'opportunité du chantier en cours de passage au nouvel outil d'automatisation. Il s'agit donc d'un projet de refonte profonde aussi bien sur la stack technologique que sur les produits. Suite à ce chantier et à la migration du parc existant, plusieurs évolutions sont prévues avec la mise en œuvre de fonctionnalités attendues par les clients. Dans ce contexte, l'équipe cherche à se renforcer avec des gestionnaires de run spécialisés dans le support au développement et à l'orchestration d'infrastructure as code. La stack technologique étant orientée sur Python et Terraform, un développeur / OPS sur ces deux technologies est recherché pour assurer le support sur les produits de la squad. MissionsDéveloppement des nouveaux correctifs pour les workflows de provisionnement et de gestion d'infrastructure as code pour le projet VMWARE as code. Mise en place de librairies standards partagées entre produits. Intégration à un nouvel outil d'automatisation (AirFlow/Terraform). Développement de nouvelles fonctionnalités avec Python, Go et Terraform. Mise à disposition de l'offre dans la marketplace interne. Outils & EnvironnementPython Terraform Go AirFlow JIRA Méthodologie SCRUM Conditions de travailMission au sein de la squad Server Expérience requise : au moins 3 ans dans le domaine de l'infrastructure as code Autonomie demandée Langue : anglais professionnel
View this job
Contractor

Contractor jobConsultant Data Analytics Senior

Raedy
Published on
Agile Method
Apache Airflow
DBT

12 months
Paris, France
Dans le cadre du renforcement de son équipe Data, une entreprise internationale recherche un Consultant Data Analytics Senior afin de renforcer ses capacités en modélisation de données et en restitution analytique. La mission consiste à fiabiliser l'ensemble de la chaîne de traitement de la donnée, depuis les données brutes jusqu'à la mise à disposition d'indicateurs et de tableaux de bord répondant aux besoins des équipes métiers. Missions principales Concevoir, développer et maintenir des modèles de données avec dbt, en assurant leur modélisation, leurs tests et leur documentation. Orchestrer, optimiser et fiabiliser les pipelines de transformation des données. Concevoir des tableaux de bord métiers clairs, pertinents et exploitables. Recueillir les besoins des équipes métiers et les traduire en indicateurs, modèles de données et solutions analytiques. Contribuer à l'amélioration de la qualité, de la gouvernance et de la documentation des données. Participer aux évolutions de l'architecture Data, notamment aux projets de migration et aux travaux d'optimisation des performances et des coûts. Atouts complémentairesUne expérience dans les secteurs du luxe, de la mode, du retail ou de la distribution haut de gamme constitue un plus. Une expérience au sein d'organisations internationales et dans des environnements Data complexes est appréciée.
View this job
Contractor
Permanent

Job VacancyArchitecte Data / Data Platform DBT & Starburst

OBJECTWARE
Published on
Ansible
Apache Airflow
DBT

3 years
40k-85k €
400-680 €
Ile-de-France, France
Dans le cadre de la mise en production d'une nouvelle Data Factory, reposant sur un Data Warehouse transverse et un ensemble de services data mutualisés, nous recherchons un(e) Architecte Data / Data Platform pour accompagner l'évolution et l'industrialisation de la plateforme. Vos missionsÊtre le référent sur les choix technologiques et architecturaux de la plateforme Data. Analyser les besoins et définir les solutions techniques et fonctionnelles adaptées. Valider l'intégration de nouveaux cas d'usage sur la plateforme. Identifier les écarts entre les besoins métier et les fonctionnalités existantes (gap analysis). Challenger et faire évoluer les choix d'architecture. Accompagner les équipes de développement dans le cycle de développement. Coordonner les différents interlocuteurs IT, projets, production et métiers. Définir les priorités et les trajectoires d'évolution de la plateforme. Contribuer à la documentation technique : cartographies, dossiers d'architecture, principes d'utilisation et d'éligibilité de la plateforme. Garantir les bonnes pratiques en matière de modélisation, Data Lineage et Data Quality. Environnement techniqueData Platform / Data Warehouse : Oracle Exadata Virtualisation Data : Starburst Transformation Data : DBT Orchestration : Airflow Conteneurisation : Kubernetes CI/CD : Ansible, Jenkins Monitoring : Dynatrace Développement : Java, Angular Architecture de type Data Mesh / multi-instances Profil recherchéDe formation supérieure en informatique, vous justifiez d'une expérience significative en architecture Data / Data Platform. Vous disposez idéalement d'une expertise sur DBT et Starburst, ainsi que d'une bonne compréhension des enjeux de Data Architecture, Data Quality et Data Lineage. Vous êtes capable de prendre de la hauteur, de challenger les choix d'architecture et de faire le lien entre les besoins métier et les solutions techniques. Vous êtes à la fois référent technique, force de proposition et facilitateur auprès des équipes de développement.
View this job
Permanent

Job VacancyData Engineer - Expert Snowflake & DBT (H/F/NB) F/H

█ █ █ ██ █ █
Published on
Amazon Redshift
Apache Airflow
Blockchain

Puteaux, Ile-de-France

Imported from

Job from the tech market, identified automatically to give you a complete view of the opportunities.

Restricted access to the community

Join our platform to access the details of this job and get access to the best offers on the market.

View this job
Permanent

Job VacancyData Engineer PySpark F/H

█ █ █ ██ █ █
Published on
Amazon DynamoDB
Amazon Redshift
Apache Airflow

Imported from

Job from the tech market, identified automatically to give you a complete view of the opportunities.

Restricted access to the community

Join our platform to access the details of this job and get access to the best offers on the market.

View this job
Contractor
Permanent

Job VacancyIngénieur Devops

VISIAN
Published on
Apache Airflow
DevOps
Go (language)

1 year
Ile-de-France, France
ContexteLa squad Server, au sein d'une grande entreprise du secteur bancaire, a pour mission d'exposer et d'orchestrer des produits "Server", majoritairement des solutions de virtualisation d'OS, pour les usages du groupe. Elle permet le provisionnement et la gestion d'une gamme étendue de produits répondant à des besoins métiers variés. Plusieurs solutions existantes vont être rapprochées via l'opportunité du chantier en cours de passage au nouvel outil d'automatisation. Il s'agit donc d'un projet de refonte profonde aussi bien sur la stack technologique que sur les produits. Suite à ce chantier et à la migration du parc existant, plusieurs évolutions sont prévues avec la mise en œuvre de fonctionnalités attendues par les clients. Dans ce contexte, l'équipe cherche à se renforcer avec des gestionnaires de run spécialisés dans le support au développement et à l'orchestration d'infrastructure as code. La stack technologique étant orientée sur Python et Terraform, un(e) développeur/OPS sur ces deux technologies est recherché(e) pour assurer le support sur les produits de la squad. MissionsDéveloppement des nouveaux correctifs pour les workflows de provisionnement et de gestion d'infrastructure as code pour le projet VMWARE as code. Mise en place de librairies standards partagées entre produits. Intégration à un nouvel outil d'automatisation (AirFlow/Terraform). Développement de nouvelles fonctionnalités avec Python, Go et Terraform. Mise à disposition de l'offre dans la marketplace interne. Outils & EnvironnementPython Terraform Go AirFlow Jira Méthodologie Scrum Conditions de travailMission au sein de la squad Server Expérience requise : au moins 3 ans dans le domaine de l'infrastructure as code (IaC) Langue : anglais nécessaire
View this job

Connecting Tech-Talent

Free-Work, THE platform for all IT professionals.

Free-workers
Resources
About
Recruiters area
2026 © Free-Work / AGSI SAS
Follow us