Trouvez votre prochaine offre d’emploi ou de mission freelance Data Engineering

Votre recherche renvoie 135 résultats.
Freelance

Mission freelancePlatform Engineer (Kafka / Kubernetes / data)

ESENCA
Publiée le
Apache Kafka
CI/CD
DevOps

1 an
Lille, Hauts-de-France
Présence sur site : 3 jours par semaine (jours fixes) + 2 jours de télétravail possibles Durée de la mission : 12 mois renouvelables Démarrage : ASAP ContexteDans le cadre d'un important programme de transformation de son système d'information, notre client renforce son équipe Data Engineering et recherche un(e) Platform Engineer expérimenté(e). Vous participerez à la conception et à la mise en œuvre d'une plateforme de streaming de données basée sur Apache Kafka, destinée à être utilisée en self-service par les différentes équipes de développement. L'objectif est de construire une plateforme moderne, automatisée et industrialisée permettant d'accélérer le développement des applications tout en favorisant une architecture événementielle. Vous évoluerez au sein d'une équipe Agile composée de développeurs, d'un Product Owner et d'un Engineering Manager. Vos missionsEn tant que Platform Engineer, vous serez notamment en charge de : Concevoir, déployer et maintenir une plateforme Kafka robuste et hautement disponible. Automatiser le déploiement et l'administration de la plateforme via des approches Infrastructure as Code et GitOps. Mettre en place les pipelines CI/CD sous GitLab. Développer des mécanismes de self-service permettant aux équipes de créer et gérer leurs ressources Kafka de manière autonome. Assurer l'exploitation, la supervision et l'amélioration continue de la plateforme. Déployer les outils de monitoring, de traçabilité et d'observabilité. Rédiger la documentation technique, les guides utilisateurs ainsi que les procédures d'exploitation. Accompagner les équipes de développement dans l'utilisation de la plateforme et promouvoir les bonnes pratiques. Participer à l'évolution de la Data Platform et contribuer aux futurs projets d'extension de la plateforme. Environnement techniqueIndispensableApache Kafka Kafka Connect Kubernetes Docker GitLab CI/CD GitOps Infrastructure as Code (Terraform ou équivalent) Monitoring & Observabilité Prometheus Datadog OpenTelemetry AppréciéKafka Resource Operator (KRO) Data Platform Data Lake Data Mesh Apache Iceberg Snowflake FinOps Cloud public (AWS, Azure ou GCP)
Voir cette offre
CDI

Offre d'emploiTech Lead Databricks - Lyon

KOMEET TECHNOLOGIES
Publiée le
Databricks
PySpark

50k-60k €
Lyon, Auvergne-Rhône-Alpes
En tant que Tech Lead, vous êtes l'expert Data Engineering et le référent technique dans vos missions. Vous intervenez principalement sur les problématiques d'ingestion, de traitement et d'industrialisation des données sur la data plateforme. Sans être responsable de l'architecture Data globale, vous avez un rôle clé dans la qualité des livrables, la standardisation des pratiques et la montée en compétence des Data Engineers. Expérience attendue : 7 à 12+ ans en Data Engineering avec une expérience dans un rôle de référent technique Vous correspondez au/à la Tech Lead que nous recherchons si : Vous disposez d'un leadership technique, reconnu et légitime auprès des équipes Vous savez animer, encadrer et fédérer une équipe autour de bonnes pratiques techniques et d'objectifs communs Vous faites preuve d'une excellente communication, associée à une forte capacité pédagogique Vous adoptez un esprit critique constructif et savez challenger les choix techniques dans une logique d'amélioration continue Vous êtes capable de prendre du recul sur des problématiques techniques afin de proposer des solutions pertinentes et durables Vous êtes autonome, proactif et doté d'un fort sens des responsabilités Vous favorisez le partage de connaissances et la montée en compétence collective Vous savez collaborer efficacement avec des rôles transverses (Architectes, Product Owners, DevOps, ML Engineers) Vous maîtrisez Python et SQL à un niveau avancé, avec une forte sensibilité aux bonnes pratiques de software engineering (qualité, maintenabilité, testabilité) Vous êtes capable de définir, documenter et faire appliquer des standards de développement, incluant la structuration des projets, les conventions de code et les stratégies de tests Vous avez une expérience significative dans la mise en place et la maintenance de chaînes CI/CD appliquées aux pipelines Data Vous portez une attention particulière à la qualité des données, à la testabilité et à l'observabilité des pipelines en production Vous pratiquez régulièrement les revues de code, le mentoring et l'accompagnement technique des Data Engineers Vous êtes en mesure de concevoir des frameworks internes et des briques techniques réutilisables afin d'industrialiser et standardiser les développements Vous comprenez les enjeux de performance, de scalabilité et de maîtrise des coûts, et savez les intégrer dans vos choix techniques
Voir cette offre
Freelance

Mission freelanceData Engineer Senior Big Data & Cloud

ABSIS CONSEIL
Publiée le
Big Data

1 an
400-620 €
La Défense, Île-de-France
Au sein d'une équipe Data & Digital, vous intervenez sur le développement et l'industrialisation de solutions Big Data à forte volumétrie dans un environnement exigeant et innovant. Vous contribuerez à la conception, au développement et à l'exploitation de plateformes Data reposant sur des technologies Cloud et Big Data. Vos missionsDévelopper des applications Data et des API REST en Java/Spring. Participer aux études de faisabilité et aux choix techniques. Concevoir et implémenter des traitements Big Data. Mettre en œuvre les bonnes pratiques de qualité logicielle (TDD/BDD). Automatiser les déploiements et contribuer à l'industrialisation des environnements. Optimiser les performances applicatives et la stabilité des plateformes. Accompagner les équipes métiers et participer au support des phases de tests. Assurer le maintien en conditions opérationnelles des solutions. Profil recherchéBac+5 École d'Ingénieur ou équivalent. Expérience significative en Data Engineering et environnements Big Data. Excellente maîtrise de Java. Solides compétences sur Spark et Hadoop. Expérience des environnements Cloud AWS et/ou Azure. Bonne maîtrise de Python et/ou Scala. Expérience des API REST et du framework Spring. Environnement techniqueJava Spring Boot Spark Hadoop HDFS Oozie Scala Python AWS Azure Shell Unix Git / GitHub Containers TDD / BDD
Voir cette offre
Freelance

Mission freelanceTech Lead Machine Learning /IA

Cherry Pick
Publiée le
Agent IA
API REST
Azure

2 mois
600-680 €
Paris, France
Dans le cadre du développement de son pôle Intelligence Artificielle, notre client recherche un Tech Lead Machine Learning / IA capable de garantir l'excellence technique des solutions IA développées et industrialisées. Véritable référent technique, vous définirez les standards d'architecture et de développement, piloterez les choix technologiques et accompagnerez les équipes Data Science, Data Engineering et Software dans la conception et la mise en production de solutions IA robustes, scalables et sécurisées. Vous interviendrez sur des projets innovants autour de l'IA Générative, des LLM et des architectures MLOps dans un environnement Cloud. Vos missionsArchitecture & Engineering IADéfinir les standards d'architecture Machine Learning et IA. Concevoir des architectures robustes, évolutives et sécurisées. Concevoir et valider les pipelines ML de bout en bout : Data ingestion Entraînement Validation Déploiement Monitoring Garantir la qualité technique des solutions mises en production. Industrialiser les modèles IA via les meilleures pratiques MLOps. Leadership techniqueÊtre le référent technique du pôle IA. Encadrer les équipes Data Science, Data Engineering et Software Engineering. Diffuser les bonnes pratiques de développement. Réaliser des revues de code et audits techniques. Accompagner la montée en compétence des équipes. Choix technologiquesDéfinir les standards techniques de la plateforme IA. Superviser les choix des frameworks et outils : Frameworks Machine Learning Outils MLOps Cloud Azure / Google Cloud Garantir la cohérence globale de l'écosystème technique. Gouvernance & QualitéAuditer les solutions IA sur les aspects : Performance Robustesse Scalabilité Sécurité Maintenabilité Coûts (FinOps) Définir les standards de gouvernance des modèles et des données. Assurer le suivi de la qualité des modèles en production. Contribution produitParticiper aux phases de cadrage des projets IA. Contribuer à la roadmap technologique IA. Collaborer étroitement avec : Product Owner IA Data Scientists Data Engineers Développeurs Software Innovation & VeilleAssurer une veille permanente sur les innovations autour de : IA Générative LLM RAG Agents IA MLOps Cloud Architectures Data Compétences techniques recherchéesIntelligence ArtificielleMachine Learning Deep Learning IA Générative Large Language Models (LLM) Prompt Engineering RAG (Retrieval-Augmented Generation) Évaluation de modèles Systèmes agentiques (Agents IA) DéveloppementPython (expert) Programmation orientée objet Développement logiciel MLOps / DevOpsGit Docker Kubernetes CI/CD MLflow CloudMicrosoft Azure Google Cloud Platform (GCP) InfrastructureTerraform Infrastructure as Code (IaC) ArchitectureAPI REST Microservices Architectures distribuées Architectures scalables Déploiement de modèles en production Exploitation des modèlesMonitoring des modèles IA Optimisation des performances Scalabilité Gouvernance des données Sécurité des modèles Compétences comportementalesLeadership technique reconnu. Excellentes capacités de communication. Esprit de mentoring et de transmission. Forte capacité à structurer des standards de développement. Sens de l'innovation. Esprit d'analyse et de résolution de problèmes. Capacité à prendre des décisions techniques structurantes. Orientation résultats et qualité.
Voir cette offre
CDI

Offre d'emploiData Engineer – Enterprise Data Hub (EDH) / Cloudera

█ █ █ ██ █ █
Publiée le
Apache Spark
Big Data
Cassandra

Royaume-Uni

Offre importée

Offre issue du marché tech, identifiée automatiquement pour vous donner une vue complète des opportunités.

Accès restreint à la communauté

Rejoignez notre plateforme pour accéder aux détails de cette offre et obtenir un accès aux meilleures offres du marché.

Voir cette offre
CDI

Offre d'emploiinteropérabilité - Ingénieur Intégration, Data & Cloud

1PACTEO
Publiée le
CI/CD

Paris, France
Ingénieur Intégration, Data & Cloud Missions principales : L'ingénieur intervient sur la conception, le développement et l'exploitation de solutions d'intégration, de traitement de données et d'architectures cloud, dans un contexte orienté automatisation, data et DevOps. Responsabilités & activités Intégration & Orchestration : • Développement et orchestration de flux d'intégration avec Magic xpi • Automatisation des échanges de données entre systèmes (on premise ↔ cloud) • Intégration de services via APIs REST (authentification, appels sécurisés, transformation des données) • Conception et orchestration de workflows d'intégration avec Application Integration (GCP) Cloud & Architecture (Google Cloud Platform) • Conception et déploiement de solutions cloud sur Google Cloud Platform (GCP) • Mise en place et gestion d'architectures cloud orientées data et intégration • Gestion des environnements dev / recette / production Data Engineering & Analytics • Modélisation de données et conception de pipelines ETL / ELT • Traitement de volumes de données importants • Optimisation de requêtes SQL avancées • Analyse et data warehousing avec BigQuery • Transformation et modélisation analytique avec dbt (staging, intermediate, marts, tests de qualité, documentation, versioning) ETL & Outils Data • Conception et développement de flux ETL avec SQL Server Integration Services (SSIS) • Automatisation des traitements d'intégration de données multi-sources Développement & Scripting • Programmation Python • SQL avancé • Scripting et automatisation (batch processing, jobs automatisés) DevOps & CI/CD • Mise en place et maintenance de pipelines CI/CD avec GitHub • Automatisation des tests, builds et déploiements via GitHub Actions • Gestion du versioning et des bonnes pratiques de développement Automatisation Low-Code • Création de flux Power Automate (cloud et desktop) • Utilisation de connecteurs et intégrations avec des systèmes tiers Méthodologies & Qualité • Travail en méthodologie Agile / Scrum • Application des bonnes pratiques de développement et de data engineering • Contribution à la documentation technique et à l'amélioration continue Compétences clés • Intégration applicative & orchestration de flux • Cloud GCP & architectures data • Data engineering, SQL avancé, ETL / ELT • DevOps & CI/CD • Automatisation et scripting • Travail collaboratif et approche orientée qualité
Voir cette offre
Freelance

Mission freelanceConsultant senior Power BI / BigQuery (H/F)

HOXTON PARTNERS
Publiée le
BigQuery
Microsoft Power BI

6 mois
500-530 €
Paris, France
Hoxton Partners recherche un Consultant senior Power BI / BigQuery afin d'intervenir dans le cadre d'un projet data stratégique au sein d'un environnement international du secteur retail / luxe. La mission s'adresse à un expert Power BI capable d'intervenir comme référent technique auprès des équipes BI, Data Engineering et Cloud. Le consultant aura pour objectif d'analyser les problématiques de performance existantes, de définir des recommandations d'architecture et de mettre en œuvre les optimisations nécessaires sur l'ensemble de la chaîne décisionnelle, depuis la source BigQuery jusqu'aux rapports Power BI. Les principales responsabilités seront les suivantes : Auditer les rapports, datasets et modèles Power BI existants afin d'identifier les causes de lenteur, les requêtes coûteuses et les problèmes de consommation de capacité. Optimiser les modèles sémantiques : modélisation en étoile, relations, cardinalité, agrégations, partitionnement et réduction du volume de données. Concevoir et optimiser des architectures DirectQuery, Import et Composite Models avec BigQuery comme source principale. Améliorer le query folding, le pushdown des requêtes et l'utilisation du connecteur BigQuery. Réécrire et optimiser les mesures DAX complexes en tenant compte des moteurs Formula Engine et Storage Engine. Refactoriser les requêtes Power Query et le code M afin de préserver le query folding. Optimiser les traitements côté BigQuery : partitionnement, clustering, vues matérialisées, BI Engine, SQL et maîtrise des coûts. Mettre en place une démarche structurée d'analyse de performance à l'aide de Performance Analyzer, DAX Studio, Tabular Editor et VertiPaq Analyzer. Définir des standards de développement, des règles de gouvernance et un framework de revue de code. Accompagner les équipes internes par des sessions de coaching, des revues techniques et la production de documentation. Collaborer avec les équipes Data Engineering et Cloud afin d'améliorer les performances de bout en bout.
Voir cette offre
Freelance

Mission freelanceDatabricks Engineer

Phaidon London- Glocomms
Publiée le
Apache Spark
Azure
Databricks

12 mois
600-750 €
Paris, France
Data Engineer – Gestion d'ActifsNotre client, un acteur mondial majeur de la gestion d'actifs, recherche un Data Engineer expérimenté pour rejoindre son département Investment Accounting & Administration au sein de l'activité Investment Management. Il s'agit d'une opportunité stratégique de contribuer au développement et à l'évolution d'une plateforme de données cloud au cœur des opérations d'investissement, de l'analytique et du reporting. Le candidat retenu participera à la conception, au développement et à l'optimisation d'un hub de données d'entreprise complexe, permettant aux équipes d'investissement d'exploiter pleinement les données Bloomberg ainsi que d'autres sources de données financières. En collaboration avec des équipes internationales, vous développerez des solutions de données évolutives qui soutiennent la prise de décision et la création de valeur à partir des données. Principales ResponsabilitésConcevoir, développer et maintenir des pipelines de données et des produits data cloud robustes au service d'opérations d'investissement critiques et d'applications analytiques à grande échelle. Renforcer et étendre les capacités de la plateforme de données de l'entreprise à l'aide de technologies modernes de Data Engineering. Collaborer étroitement avec les équipes d'investissement et les parties prenantes métiers afin de comprendre leurs besoins et fournir des solutions adaptées. Développer des solutions performantes basées sur Databricks, Spark, Delta Lake et les technologies cloud natives. Promouvoir les meilleures pratiques en matière de développement et de gouvernance des données : qualité de code, CI/CD, tests automatisés et fiabilité des plateformes. Contribuer à l'adoption de technologies innovantes, notamment l'Intelligence Artificielle, les Large Language Models (LLM) et les outils d'analyse avancée. Assurer une veille technologique continue afin d'accompagner l'évolution de la plateforme et des capacités de l'équipe. Compétences et Expérience RequisesMinimum 5 ans d'expérience en Data Engineering, dont au moins 5 ans sur Databricks dans la conception et le développement de pipelines de données. Solide expérience du cloud, idéalement Microsoft Azure ; une expérience sur AWS ou GCP sera également considérée. Maîtrise de Python, PySpark, SparkSQL et/ou Scala. Expérience dans la mise en place et l'orchestration de pipelines Big Data avec des outils tels qu'Azure Data Factory, Airflow, dbt ou équivalents. Expertise de Spark, particulièrement Databricks Spark et Delta Lake. Expérience dans l'implémentation de solutions Big Data dans un environnement cloud, incluant les Data Lakes et architectures Lakehouse. Excellentes compétences SQL avec la capacité de développer et d'optimiser des requêtes complexes sur de très grands volumes de données. Maîtrise de GitHub, du contrôle de version et des processus de déploiement CI/CD. Expérience des technologies d'IA, des LLM, de Databricks Genie ou d'outils similaires. Compétences SouhaitéesExpérience en architecture de bases de données et en modélisation de données (modèles conceptuels, logiques et physiques). Expérience préalable dans la gestion d'actifs, l'asset management, l'investissement ou un environnement de services financiers. Qualités PersonnellesExcellentes capacités d'analyse et de résolution de problèmes. Forte capacité d'apprentissage et adaptation rapide aux nouvelles technologies. Aisance relationnelle et aptitude à collaborer avec des équipes et parties prenantes internationales. Cette opportunité offre la possibilité de rejoindre une équipe Data en forte croissance et de contribuer à une plateforme stratégique au cœur des activités d'un leader mondial de la gestion d'actifs.
Voir cette offre
Freelance

Mission freelanceExpert ClickHouse / Data Platform Engineer (F/H)

CELAD
Publiée le

1 an
600-680 €
Paris, France
Dans le cadre de l'évolution de sa plateforme analytique, nous recherchons actuellement un.e Expert ClickHouse / Data Platform Engineer pour intervenir chez l'un de nos clients du secteur des télécommunications. Vous rejoindrez une équipe en charge de la chaîne de valorisation des données télécom, dont le cœur repose sur une plateforme ClickHouse alimentée par des pipelines d'ingestion Kafka. Votre mission consistera à faire évoluer cette plateforme, optimiser ses performances et accompagner les équipes dans leur montée en compétence. 🎯 Votre rôle En tant qu'Expert ClickHouse, vous prenez en charge l'administration, l'optimisation et l'évolution de la plateforme analytique. Au-delà de votre expertise technique, vous jouez un rôle de référent auprès des ingénieurs de l'équipe en assurant le transfert de compétences, la documentation et la pérennisation des bonnes pratiques. Vos missions📊 Administration & évolution de la plateforme ClickHouse Vous intervenez sur le cœur de la plateforme de valorisation des données. À ce titre, vous serez amené.e à : Reprendre en main la configuration et l'exploitation de la plateforme ClickHouse. Administrer et optimiser les bases de données analytiques en production. Concevoir et faire évoluer les modèles de données. Optimiser les performances des requêtes sur des volumes de données importants. Gérer les stratégies de partitionnement, les moteurs MergeTree et les vues matérialisées. Participer à la refonte des schémas de données et des pipelines d'alimentation. ⚙️ Data Engineering & industrialisation Vous contribuez à l'évolution de l'architecture de données. Vos principales responsabilités seront de : Maintenir et faire évoluer les pipelines développés en Python. Participer aux flux d'ingestion de données via Kafka. Mettre à jour les scripts SQL associés aux traitements analytiques. Participer à l'industrialisation de la plateforme. Assurer la qualité, la fiabilité et les performances des traitements. 🤝 Mentorat & accompagnement technique Vous accompagnez les équipes dans leur montée en compétence. Dans ce cadre, vous serez chargé.e de : Former et accompagner les ingénieurs de l'équipe sur ClickHouse. Documenter les architectures, procédures et bonnes pratiques. Assurer le transfert de connaissances afin de garantir la pérennité de la plateforme. Participer aux réflexions d'architecture et aux choix techniques. 🧭 Environnement technique🛠 Technologies ClickHouse Python SQL Kafka Grafana Apache Superset Pipelines de données Modélisation analytique MergeTree Vues matérialisées Connaissances appréciées : C Lua
Voir cette offre
CDI

Offre d'emploiData Engineer (Graph) H/F

█ █ █ ██ █ █
Publiée le
Ansible
Apache Spark
CI/CD

Paris, France

Offre importée

Offre issue du marché tech, identifiée automatiquement pour vous donner une vue complète des opportunités.

Accès restreint à la communauté

Rejoignez notre plateforme pour accéder aux détails de cette offre et obtenir un accès aux meilleures offres du marché.

Voir cette offre
CDI
Freelance

Offre d'emploiData Engineer IA Senior – Data Platform, Analytics & IA (H/F)

Argain Consulting Innovation
Publiée le
BigQuery
Confluence
Data Warehouse

24 mois
46k-50k €
400-460 €
Nantes, Pays de la Loire
Contexte de la mission Dans le cadre du renforcement de son équipe Data, notre client recherche un Data Engineer Senior pour contribuer à la construction et à l'évolution de sa plateforme de données. Vous interviendrez sur l'ensemble de la chaîne de valeur de la donnée : de l'ingestion des flux jusqu'à leur exploitation par les équipes Analytics, BI et IA. Vous serez garant de la qualité, de l'intégrité, de l'exactitude et de la cohérence des données afin de permettre la création d'indicateurs fiables, de tableaux de bord performants et l'alimentation de cas d'usage Data Science et IA. Votre mission consistera également à concevoir une architecture de données robuste ainsi qu'une couche sémantique unifiée facilitant la compréhension et l'exploitation des données par les utilisateurs métiers. Vos missions Data Engineering & Pipelines Concevoir, développer et maintenir des pipelines de données (ETL/ELT). Assurer la collecte, l'intégration et la transformation de données provenant de sources hétérogènes. Optimiser les performances et la fiabilité des flux de données. Garantir la qualité et la cohérence des données tout au long des traitements. Modélisation Data Analytics & IA Concevoir les modèles de données adaptés aux usages analytiques et décisionnels. Mettre en place et optimiser des architectures de type : Data Warehouse /Datamarts/Schémas en étoile Accompagner les besoins liés aux projets IA et à la valorisation des données. Couche sémantique & Business Intelligence Construire et maintenir une couche sémantique assurant des définitions métiers communes et cohérentes. Collaborer avec les équipes métiers pour structurer les indicateurs et KPIs. Participer à la valorisation de la donnée à travers des outils de datavisualisation. Industrialisation & DevOps Participer à l'automatisation des déploiements et à la mise en place des bonnes pratiques CI/CD. Contribuer à l'amélioration continue de l'écosystème Data.
Voir cette offre

Au service des talents IT

Free-Work est une plateforme qui s'adresse à tous les professionnels des métiers de l'informatique.

Ses contenus et son jobboard IT sont mis à disposition 100% gratuitement pour les indépendants et les salariés du secteur.

Free-workers
Ressources
A propos
Espace recruteurs
2026 © Free-Work / AGSI SAS
Suivez-nous