Trouvez votre prochaine mission ou futur job IT.

24 résultats
Freelance

Mission freelanceLead Data Engineer

STHREE SAS
Publiée le
Azure
Python
SQL

1 an
Paris, Île-de-France
Le Senior Data Engineer / Data Engineering Tech Lead est responsable des fondations d'ingénierie permettant de rendre les données du programme 24/7 exploitables, fiables et évolutives. Il s'agit d'un poste d'ingénieur senior très opérationnel (hands-on) avec des responsabilités limitées de leadership technique. Ce n'est pas un poste généraliste de développement logiciel .NET. L'accent est mis sur la construction de pipelines de données de qualité industrielle : ingestion, transformation, qualité des données, traçabilité (lineage), observabilité et mise à disposition sécurisée de produits de données et de jeux de données prêts pour les calculs. Le rôle consiste à orienter les choix techniques et les standards d'ingénierie tout en continuant à concevoir et développer directement les composants critiques. Au sein de l'équipe produit 24/7, le/la titulaire du poste collaborera étroitement avec le Product Owner, les Business Analysts, les développeurs, les architectes, les équipes Data Platform et les parties prenantes métiers dans les différents pays. Il/elle doit être capable de fournir des solutions tactiques à court terme tout en conservant une vision claire de l'architecture cible et des capacités réutilisables OneB2B. Responsabilités principalesA. Architecture Data et intégration des sourcesContribuer à l'architecture data de bout en bout et documenter les flux de données actuels et cibles, les interfaces, dépendances et responsabilités. Concevoir et développer des pipelines d'ingestion à partir de : Bases de données ; APIs REST ; Jeux de données internes ; Flux partenaires ; Échanges de fichiers sécurisés. Intégrer des données hétérogènes provenant de différents pays en isolant les spécificités de chaque source via des connecteurs réutilisables. Mettre en œuvre des traitements batch et, lorsque nécessaire, des flux quasi temps réel ou de streaming. Gérer : Les évolutions de schémas ; Les données arrivant en retard ; Les rejouabilités (replay) ; L'idempotence ; Les backfills ; Les données en erreur. Collaborer avec les équipes plateforme pour déterminer s'il convient de réutiliser un produit de données existant plutôt que de créer une copie locale. B. Ingénierie des séries temporelles et modélisation des donnéesConcevoir des structures évolutives pour gérer de gros volumes de données temporelles : Consommation client ; Production d'actifs énergétiques. Définir et maintenir les modèles de référence (canonical models) pour : Client ; Site ; Point de comptage ; Contrat ; Actif ; Allocation ; Certificat ; Série temporelle ; Résultat de matching ; Période de reporting. Appliquer les modèles de données adaptés aux usages : Opérationnels ; Analytiques ; Jeux de données de calcul. Gérer les problématiques liées : Aux fuseaux horaires ; Aux changements d'heure ; Aux granularités temporelles ; Aux unités de mesure ; Aux données manquantes ; Aux doublons ; Aux corrections versionnées. Optimiser le stockage, le partitionnement, l'indexation et les performances selon les volumes réellement observés et les règles de rétention. C. Transformation des données et moteur de calculDévelopper des transformations testées permettant de standardiser les données sources en courbes de consommation et de production prêtes pour les calculs. Alimenter le Hourly Matching Score et les indicateurs clients associés via des datasets reproductibles et versionnés. Collaborer avec les experts métiers pour transformer les règles de calcul en spécifications techniques et tests automatisés. Garantir la distinction entre : Les mesures opérationnelles provisoires ; Les résultats validés ou certifiés. D. Qualité des données, traçabilité et observabilitéMettre en place des contrôles automatisés sur : La complétude ; La validité ; La fraîcheur ; L'unicité ; La cohérence ; L'intégrité référentielle. Définir des mécanismes de rapprochement entre : Les données sources ; Les données ingérées ; Les données transformées ; Les données restituées. Assurer une traçabilité complète de bout en bout : Origine des données ; Versions des transformations ; Versions des calculs ; Métadonnées d'exécution. Construire des tableaux de bord de supervision couvrant : La fraîcheur des données ; Les échecs de pipelines ; Les enregistrements rejetés ; Le respect des SLA. Participer à l'analyse des incidents, à l'identification des causes racines et à la prévention de leur récurrence. E. Ingénierie, sécurité et opérationsUtiliser les bonnes pratiques de développement : Git ; Revue de code ; Tests automatisés ; CI/CD. Contribuer aux démarches Infrastructure as Code avec les équipes DevOps. Appliquer les principes de sécurité "by design" : Gestion des secrets ; Chiffrement ; Gestion des droits au moindre privilège ; Séparation des environnements ; Protection des données clients. Produire : Un code maintenable ; Des runbooks ; Des ADR (Architecture Decision Records) ; Des contrats de données ; Une documentation opérationnelle. Participer aux cérémonies Agile tout en pilotant un backlog technique dédié à : La fiabilité ; L'évolutivité ; La dette technique. Attentes en leadership techniqueÊtre la référence technique Data de l'équipe 24/7 tout en restant fortement impliqué dans : La conception ; Le développement ; Les tests ; Le support de production. Définir les standards d'ingénierie pour : L'ingestion ; Les transformations ; Les tests ; Le déploiement ; Le monitoring ; Les mécanismes de reprise. Animer les revues techniques et revues de code. Accompagner les développeurs travaillant sur les flux de données sans assurer un rôle de manager hiérarchique. Remettre en question les duplications inutiles et promouvoir la réutilisation des composants de plateforme. Transformer des exigences ambiguës en feuilles de route techniques structurées. Être responsable des décisions non fonctionnelles liées à : La scalabilité ; La disponibilité ; La sécurité ; L'exploitabilité ; La maintenabilité ; Les coûts.
Voir cette offre
CDI

Offre d'emploiLead Data Engineer (F/H)

█ █ █ ██ █ █
Publiée le
Data Engineering
Data science
DevOps

Voiron, Auvergne-Rhône-Alpes

Offre importée

Offre issue du marché tech, identifiée automatiquement pour vous donner une vue complète des opportunités.

Accès restreint à la communauté

Rejoignez notre plateforme pour accéder aux détails de cette offre et obtenir un accès aux meilleures offres du marché.

Voir cette offre
Freelance

Mission freelance464 - Lead Data Engineer - Grade C2

Nicholson SAS
Publiée le
Azure
Azure Data Factory
CI/CD

12 mois
510 €
France
Lead Python Data Engineer (H/F) – Projet Data & Analytics Démarrage : ASAP (mission longue jusqu'au 12/11/2027) Localisation : Full Remote (France) TJM cible : Max. 510 € HT (selon profil) Contexte & Rôle Rejoignez un projet Data & Analytics d'envergure pour un acteur majeur international du secteur des services. Poste résolument hands-on : vous codez, concevez et portez les choix d'architecture sur votre périmètre. Missions principales Concevoir, développer et optimiser des data pipelines robustes en Python. Manipuler, nettoyer et transformer des volumes de données complexes (Pandas, NumPy, DataFrames). Appliquer les standards Software Engineering : Clean Code, modularité, CI/CD, tests unitaires et d'intégration. Prendre le lead technique : ownership des solutions, code reviews et accompagnement des Data Engineers plus juniors. Collaborer étroitement avec les équipes Produit, Data Analysts et Data Scientists. Profil recherché Expertise cœur (indispensable) : Maîtrise avancée de Python appliqué au Data Engineering (Pandas, NumPy, SQL, optimisation de performances, Data Quality). Environnement apprécié (non bloquant) : Connaissance de l'écosystème Azure (Data Factory, Data Lake, DevOps), Databricks, PySpark, Delta Lake ou dbt. Posture : Capacité avérée à fédérer techniquement et à garantir l'excellence opérationnelle du code produit.
Voir cette offre
CDI

Offre d'emploiLead Data Engineer GCP F/H

█ █ █ ██ █ █
Publiée le
Apache Kafka
BigQuery
Data Engineering

54k €
Valbonne, Provence-Alpes-Côte d'Azur

Offre importée

Offre issue du marché tech, identifiée automatiquement pour vous donner une vue complète des opportunités.

Accès restreint à la communauté

Rejoignez notre plateforme pour accéder aux détails de cette offre et obtenir un accès aux meilleures offres du marché.

Voir cette offre
CDI

Offre d'emploiLead Data Engineer - Fabric - Databricks

Montreal Associates
Publiée le

70k-75k €
France
Je recrute un Lead Data Engineer - Microsoft Fabric / Azure Databricks Je recherche un profil Lead Data Engineer senior (7+ ans d'expérience) capable de combiner expertise technique, architecture Data et posture de consultant. Je recherche un Lead Data Engineer senior (10+ ans d'expérience) capable de combiner expertise technique, architecture Data et posture de consultant. Prérequis indispensables * Expertise hands-on Microsoft Fabric ET/OU Azure Databricks * Solide maîtrise de l'écosystème Data Microsoft / Azure * Expérience en architecture de plateformes Data modernes * Anglais courant / fluent * Excellente posture client : workshops, conseil, communication avec les stakeholders et leadership technique ⚠️ Microsoft Fabric ou Azure Databricks est indispensable. Si vous n'avez travaillé sur aucune de ces deux technologies, inutile de postuler à cette opportunité. Les sujets * Concevoir des plateformes Data greenfield * Moderniser des environnements Data & BI existants * Piloter techniquement des migrations vers le Cloud * Définir et challenger les choix d'architecture * Encadrer les équipes techniques * Intervenir comme référent Data & Analytics en avant-vente Je cherche donc quelqu'un qui ne soit pas uniquement un très bon Data Engineer : il faut pouvoir porter une architecture, challenger un client, prendre le lead techniquement et embarquer une équipe. 📍 CDI - 100 % full remote, avec une localisation obligatoire en France. 📩 Intéressé(e) ? Envoyez-moi directement votre CV en MP. #DataEngineering #MicrosoftFabric #AzureDatabricks #Azure #DataArchitecture #LeadDataEngineer #Microsoft Montreal Associates is acting as an Employment Agency in relation to this vacancy.
Voir cette offre
CDI

Offre d'emploiLead Data Engineer H/F

Lùkla
Publiée le
Apache Airflow

40k-50k €
Rouen, Normandie
Nous recrutons pour une entreprise du secteur de l'assurance un ou une Lead Data Engineer pour concevoir, fiabiliser et industrialiser sa plateforme data. Vous combinerez expertise technique, conception d'architecture et accompagnement d'équipe. Vous veillerez à la qualité, à la sécurité et à la performance des données, en lien étroit avec les équipes IT et métiers. Vos missions Pilotage et leadership Accompagner une équipe de Data Engineers et, éventuellement, d'Analytics Engineers Définir et promouvoir les bonnes pratiques en matière de qualité, de documentation, de gestion de versions et de supervision des données Jouer un rôle de référent technique et garantir la cohérence des choix d'architecture, en collaboration avec les équipes DevOps et l'architecte d'entreprise Travailler avec les équipes métiers, notamment en actuariat, finance, gestion des sinistres et marketing, ainsi qu'avec les équipes IT Data engineering Concevoir et maintenir des pipelines de données robustes et évolutifs Orchestrer les flux de données avec Apache Airflow Modéliser et structurer les bases de données selon les besoins analytiques Garantir la performance, la sécurité et la traçabilité des données Industrialisation et DevOps Mettre en œuvre les pratiques CI/CD pour les projets data Automatiser les tests, les déploiements et les contrôles qualité Collaborer avec les équipes DevOps et Réseaux sur la gestion et la sécurisation des environnements Superviser les traitements et contribuer à la gestion des incidents data
Voir cette offre
Freelance
CDI

Offre d'emploiTech Lead Data Engineer Kafka & Palantir Foundry

OBJECTWARE
Publiée le
Apache Kafka
Palantir Foundry

3 ans
40k-84k €
400-630 €
Île-de-France, France
Dans le cadre d'un projet Data stratégique, nous recherchons un Tech Lead Data Engineer pour accompagner la conception, le développement et l'industrialisation de solutions Data dans un environnement technique exigeant. 🎯 Vos missions Concevoir et faire évoluer des architectures Data robustes et scalables Piloter techniquement les développements et accompagner les Data Engineers Concevoir et industrialiser des pipelines de données Intervenir sur des architectures Data temps réel / streaming avec Kafka Développer et maintenir des solutions sur Palantir Foundry Garantir la qualité, la performance et la fiabilité des traitements Data Participer aux choix d'architecture et aux bonnes pratiques de développement Assurer la revue de code et accompagner la montée en compétences de l'équipe Collaborer avec les équipes Data, Architecture, DevOps et métiers 🛠️ Environnement technique Indispensables : Kafka Palantir Foundry Solide expertise en Data Engineering Conception de pipelines Data Architecture Data / traitement distribué Python et/ou SQL Expérience en environnement de production Atouts : Kafka Streams / Confluent Spark / PySpark APIs / microservices CI/CD, Git, Docker, Kubernetes Cloud Expérience en lead technique ou en accompagnement d'équipe 👤 Profil recherché De formation supérieure en informatique ou Data, vous disposez d'au moins 7 ans d'expérience en Data Engineering, dont une expérience significative en lead technique. Vous êtes à l'aise dans des environnements complexes et avez une forte capacité à challenger les choix techniques, concevoir des solutions robustes et accompagner les équipes dans leur mise en œuvre. Une expérience concrète sur Palantir Foundry et Kafka est indispensable.
Voir cette offre
Freelance

Mission freelance LEAD DATA ORCHESTRATION ENGINEER | APACHE AIRFLOW & AWS

Net technologie
Publiée le
Apache Airflow
AWS Cloud
AWS Cloudwatch

6 mois
France
Pour un grand acteur de l'industrie automobile, nous recherchons un(e) Lead Data Orchestration Engineer Senior, expert(e) Apache Airflow et AWS MWAA, pour piloter l'optimisation et l'évolution d'une plateforme d'orchestration Data à grande échelle. 🎯 Objectif de la mission Faire évoluer une plateforme d'orchestration Data critique afin d'améliorer sa scalabilité, sa résilience, son observabilité et ses coûts d'exploitation, tout en étudiant une éventuelle migration vers une architecture cible plus adaptée. 🚀 Vos missions ✔️ Auditer, optimiser et faire évoluer l'architecture Apache Airflow / AWS MWAA ✔️ Améliorer les performances et la scalabilité d'une plateforme de plus de 200 DAGs en production ✔️ Optimiser les mécanismes d'exécution : Scheduler, Executors, Pools, Triggers, Deferrable Operators ✔️ Faire évoluer les DAG Factories dynamiques et les mécanismes de génération automatisée des DAGs ✔️ Renforcer la résilience des flux : Retry Strategies, Dead Letter Queues, Circuit Breakers, isolation des traitements ✔️ Mettre en place une observabilité de bout en bout : monitoring, métriques, dashboards et alerting ✔️ Sécuriser les environnements : gestion des secrets, IAM et bonnes pratiques AWS ✔️ Étudier les alternatives à AWS MWAA : Airflow sur ECS/EKS, Astronomer, Dagster, Prefect ✔️ Définir une architecture cible et piloter une éventuelle migration d'orchestrateur ✔️ Optimiser les coûts d'exploitation et réduire les délais de résolution des incidents ✔️ Définir les standards techniques : Code Reviews, Design Patterns, conventions de développement ✔️ Accompagner les équipes Dev & Ops dans leur montée en compétences et leur autonomie
Voir cette offre
Freelance

Mission freelanceLead Data Orchestration Engineer spécialisé sur Apache Airflow et AWS MWAA/sa

WorldWide People
Publiée le
Apache Airflow

6 mois
400-520 €
France
Lead Data Orchestration Engineer spécialisé sur Apache Airflow et AWS MWAA La mission se structure autour de quatre axes : Axe 1 — Optimisation architecturale Optimiser et faire évoluer les mécanismes d'orchestration existants pour permettre le passage à l'échelle et réduire les coûts d'exploitation (temps de résolution d'incidents, effort d'ajout de nouveaux pays). Axe 2 — Sécurisation et résilience Renforcer la robustesse de la plateforme face à la charge et aux défaillances : observabilité de bout en bout, politique de rotation des secrets, isolation des flux, capacité de reprise automatique. Axe 3 — Étude et migration vers une infrastructure cible L'audit a mis en évidence les limites structurelles d'AWS MWAA pour nos besoins (contraintes de scaling, manque de flexibilité sur la configuration, coûts). Le Lead Data Orchestration Engineer devra étudier les alternatives (Airflow auto-hébergé sur ECS/EKS, Astronomer, Dagster, Prefect, ou autre solution adaptée à nos process) et piloter la migration vers l'infrastructure retenue si pertinent. Axe 4 — Autonomie des équipes Former et structurer les équipes Dev et Ops pour qu'elles puissent opérer, diagnostiquer et faire évoluer la plateforme en autonomie sur le long terme. Séniorité : 5 ans d'expérience minimum sur Apache Airflow, dont une expérience significative en environnement managé (AWS MWAA ou Google Cloud Composer). Compétences techniques requises : Maîtrise du modèle d'exécution Airflow : scheduler, executor, pools, triggers, deferrable operators Expérience de tuning et d'optimisation de plateformes Airflow à l'échelle (200+ DAGs en production) Expertise AWS : MWAA, SQS, SNS, Secrets Manager, CloudWatch, IAM Connaissance d'alternatives à MWAA : Airflow sur ECS/EKS, Astronomer, ou orchestrateurs modernes (Dagster, Prefect) — expérience de migration d'un orchestrateur vers un autre fortement appréciée Expérience avec des DAG Factories dynamiques (génération de DAGs à partir de configurations) — capacité à faire évoluer et optimiser une factory existante Patterns de résilience : retry strategies, Dead Letter Queues, circuit breakers, isolation des flux Observabilité : métriques, dashboards, alerting, routage d'incidents par criticité Python avancé (plugins custom, operators, sensors) Infrastructure as Code (Terraform) — connaissance souhaitée Compétences transverses : Capacité à concevoir et faire appliquer des standards techniques (code reviews, patterns, conventions) Expérience de mentorat et de transfert de compétences auprès d'équipes mixtes (Dev + Ops) Capacité à piloter un programme d'optimisation technique (priorisation, suivi, reporting) Autonomie et force de proposition
Voir cette offre
Freelance

Mission freelanceLead / Senior Data Engineer — Streaming & Temps Réel

Cherry Pick
Publiée le
Apache Kafka
BigQuery
Google Cloud Platform (GCP)

12 mois
Alpes-Maritimes, France
Le contexteUn acteur majeur du secteur du voyage et de la distribution lance un nouveau projet stratégique : la construction d'un moteur de recommandation et de personnalisation destiné à proposer en temps réel, à chaque client, les offres et produits les plus pertinents selon son profil. Vous êtes le premier profil technique recruté pour poser les fondations d'une nouvelle équipe Data Engineering qui s'étoffera progressivement. Tout est à construire : l'architecture a été esquissée mais reste entièrement challengeable. Votre rôle : concevoir et bâtir de zéro la plateforme de données en streaming qui alimentera les équipes Data Science et Produit. Vos missionsConcevoir et construire from scratch le pipeline de données en streaming qui alimentera les modèles de recommandation et de personnalisation. Mettre à disposition les données en temps réel pour les équipes Data Science et les produits, avec une contrainte métier forte : un temps de réponse de l'ordre de 3 secondes entre la recherche du client et la recommandation affichée. Définir et challenger les choix d'architecture (event-driven), clarifier la stack par rapport au cadrage initial. Gérer également une partie batch pour enrichir l'historique et les profils clients. Accompagner la montée en puissance de l'équipe et jouer un rôle de référent technique. Compétences techniques requisesStreaming & temps réel (critique) Maîtrise approfondie des concepts de streaming : gestion du fenêtrage (windowing), traitement temps réel, garanties de livraison, au-delà du seul outil Kafka. Expérience solide d'une architecture event-driven. Cloud & traitement Expertise Google Cloud Platform (BigQuery notamment). Python comme langage principal. Aisance sur les pipelines batch pour l'enrichissement de données historiques. Pratiques d'ingénierie Infrastructure as Code (Terraform), CI/CD, bonnes pratiques de qualité et de documentation.
Voir cette offre
Freelance
CDI

Offre d'emploiLead Data Orchestration Engineer / Expert Apache Airflow & AWS

ALLEGIS GROUP
Publiée le
Apache Airflow
AWS Cloud
Python

3 ans
40k-45k £GB
400-550 £GB
Sochaux, Bourgogne-Franche-Comté
Dans le cadre du renforcement d'une équipe Data Platform dans le secteur automobile et financier, nous recherchons un Lead Data Orchestration Engineer / Expert Apache Airflow pour accompagner l'optimisation, la sécurisation et l'évolution d'une plateforme d'orchestration Data à forte volumétrie. La plateforme Apache Airflow sous AWS MWAA orchestre actuellement des pipelines de données bancaires couvrant 9 pays européens. Vous interviendrez autour de 4 axes majeurs : 1. Optimisation de la plateforme Airflow Optimisation d'une plateforme de 200+ DAGs en production Évolution et optimisation de la DAG Factory Migration des dépendances inter-DAGs vers les Datasets Airflow Optimisation des performances au parse-time et runtime Mise en place de tests automatisés des DAGs en CI/CD 2. Sécurisation & résilience Capacity planning et tuning Airflow Gestion des pools, scaling et rétention des logs Rotation des secrets Amélioration de l'observabilité et de l'alerting Mise en œuvre de mécanismes de résilience : retry strategies, DLQ, circuit breakers, isolation des flux 3. Étude et migration de la plateforme Benchmark des alternatives à AWS MWAA Étude d'architectures Airflow sur ECS/EKS, Astronomer, Dagster, Prefect Réalisation de POC et recommandation d'une architecture cible Pilotage d'une éventuelle migration jusqu'à la mise en production 4. Leadership & transmission Définition et application des standards techniques Mentorat des équipes Dev & Ops Formation d'une dizaine de collaborateurs Accompagnement des équipes vers des compétences Data Engineering / DataOps
Voir cette offre

Déposez votre CV

  • Fixez vos conditions

    Rémunération, télétravail... Définissez tous les critères importants pour vous.

  • Faites-vous chasser

    Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.

  • 100% gratuit

    Aucune commission prélevée sur votre mission freelance.

Voir tous les derniers posts

Au service des talents IT

Free-Work est une plateforme qui s'adresse à tous les professionnels des métiers de l'informatique.

Ses contenus et son jobboard IT sont mis à disposition 100% gratuitement pour les indépendants et les salariés du secteur.

Free-workers
Ressources
A propos
Espace recruteurs
2026 © Free-Work / AGSI SAS
Suivez-nous