Trouvez votre prochaine offre d’emploi ou de mission freelance Apache Spark

151 résultats
CDI

Offre d'emploiArchitecte Solution Databricks (H/F)

Savane Consulting
Publiée le

75k-85k €
Île-de-France, France
Contexte : Dans le cadre de l'évolution d'une plateforme Data Groupe d'un acteur majeur du secteur des transports, nous recherchons un Architecte Solution / Tech Lead Databricks. Vous interviendrez au sein de l'équipe en charge de la plateforme Data afin d'accompagner plusieurs squads métiers dans la conception, l'industrialisation et la mise en production de leurs cas d'usage Data. Vous jouerez un rôle clé de référent technique, en accompagnant les équipes sur les choix d'architecture, les bonnes pratiques et la gouvernance de la plateforme. Vos missions : Participer au cadrage des projets Data et Big Data. Définir et valider les architectures techniques. Accompagner les Tech Leads et les équipes de développement. Concevoir des solutions basées sur Databricks. Participer aux revues d'architecture et aux arbitrages techniques. Rédiger la documentation d'architecture (DAT, HLD, DEX, dossiers techniques…). Accompagner les mises en production et les passages en exploitation. Participer à l'amélioration continue de la plateforme Data. Promouvoir les bonnes pratiques de développement, de sécurité, de gouvernance et de FinOps. Intervenir ponctuellement en support expert (N3). Former et accompagner les équipes projets. Environnement technique : Cloud : AWS Data Platform : Databricks Big Data : Spark, Scala, Python Data Lake / Lakehouse Power BI CI/CD : GitLab CI Infrastructure as Code : Terraform Conteneurisation : Docker, Kubernetes Sécurité & IAM Agile Scrum
Voir cette offre
CDI

Offre d'emploiLead Data (H/F)

GROUPE ARTEMYS
Publiée le

76000, Rouen, Normandie
Qui sommes-nous ?Artemys, acteur de la transformation numérique est une entreprise à taille humaine, avec plus de 30 ans d'expérience composée de plusieurs entités, chacune spécialisée dans leur domaine (Système, data, réseaux/sécu…) Ce qui nous distingue vraiment ? Ce n'est pas de dire que nous valorisons nos collaborateurs, c'est de le montrer chaque jour. Chez Artemys, l'humain est au cœur de tout ce que nous faisons. Nos valeurs, concrètes et vécues au quotidien : Convivialité : travailler dans une bonne ambiance, ça change tout Proximité : chaque membre de l'équipe a sa place et sa voix Écoute : vos idées comptent autant que votre travail Agil-IT, située à Isneauville (près de Rouen) est une entité spécialisée en Data, Développement et pilotage de projets IT. Forte de plus de 20 ans d'expertise, elle accompagne les entreprises, principalement implantées en Normandie dans leur transformation digitale. C'est au sein de cette entité, que se développe notre expertise Data. Chiffres clés : 7,8 M€ de CA | 65 consultants en 2025 Une structure à taille humaine où vos compétences et votre savoir être font la différence. Reconnue pour son exigence technique et ses valeurs humaines, elle est aujourd'hui un acteur clé en offrant des prestations d'audit, de conseil, de mise en œuvre, de migration, de support et des formations pour diverses clients. Votre mission (si vous l'acceptez) : En tant que Lead Data Engineer, vous jouerez un rôle central dans la conception et l'évolution de la plateforme Data, en combinant expertise technique, leadership et vision globale. Vos principales missions seront de : Développer et concevoir des solutions Data robustes, en particulier en Python, pour répondre aux besoins métiers et garantir la fiabilité des traitements. Construire, maintenir et optimiser des pipelines de données performants, scalables et sécurisés. Accompagner techniquement l'équipe Data Engineering, partager vos connaissances et faire progresser les pratiques de développement. Définir et faire appliquer les bonnes pratiques en matière de qualité, de documentation, de versioning, de tests et de supervision. Concevoir et orchestrer les flux de données à l'aide d'Apache Airflow, notamment via la création et la maintenance de DAGs complexes. Garantir la qualité et la cohérence des données, en assurant leur traçabilité, leur sécurité et leur conformité aux exigences du secteur. Industrialiser les projets Data grâce aux pratiques CI/CD, à l'automatisation des tests et à la sécurisation des déploiements. Collaborer avec les équipes DevOps et les architectes IT pour assurer la cohérence des choix techniques et la fiabilité des environnements. Échanger avec les équipes métiers afin de traduire leurs besoins en solutions Data adaptées. Votre rôle ne se limitera pas à piloter : vous continuerez à développer concrètement, avec une forte exigence sur la qualité du code et la robustesse des solutions mises en production. Le terrain de jeu ? Environnement Data Engineering : développement Python, SQL avancé, conception et optimisation de pipelines de données. Orchestration : Apache Airflow, conception de DAGs, supervision des traitements et gestion des incidents. Industrialisation : Git, CI/CD, tests automatisés, déploiements et contrôles qualité. Architecture et modélisation : structuration des données, modélisation en étoile ou en flocon, performance et évolutivité. Qualité et sécurité : observabilité, traçabilité, gestion des données sensibles et prise en compte des exigences réglementaires, notamment du RGPD. Collaboration : travail en lien avec les équipes IT, DevOps, architecture et métiers, dans un contexte assurantiel. Le profil que nous recherchons : Vous justifiez de 7 à 10 ans d'expérience en Data Engineering, avec une expérience significative en tant que lead technique ou référent Data. Vous avez une solide maîtrise de Python et êtes capable de développer des solutions concrètes, propres, maintenables et performantes. Vous aimez toujours mettre les mains dans le code ! Vous maîtrisez SQL avancé et savez concevoir des traitements et des pipelines de données fiables. Vous avez une bonne maîtrise des pratiques CI/CD, Git, tests automatisés et mise en production. Vous connaissez Apache Airflow et êtes capable de concevoir, maintenir et superviser des workflows complexes. Vous comprenez les enjeux de modélisation des données et savez adapter les architectures aux besoins analytiques et métiers. Vous êtes à l'aise avec les problématiques de qualité, de sécurité, de performance et de traçabilité des données. Vous savez accompagner une équipe, transmettre vos connaissances et fédérer autour de bonnes pratiques techniques. Vous communiquez facilement avec des interlocuteurs techniques comme métiers et savez expliquer vos choix avec pédagogie. Vous faites preuve d'autonomie, de rigueur et de sens des priorités. Les petits plus qui feront la différence : Une expérience dans les secteurs de l'assurance, de la banque ou de la finance. Une connaissance des technologies Big Data, notamment Spark ou équivalent. Une expérience avec des outils de Data Quality et d'observabilité. Une bonne compréhension des enjeux réglementaires liés aux données sensibles et au RGPD. Notre priorité ? Trouver un profil qui maîtrise réellement le développement Python, qui sait concevoir des solutions Data fiables et qui a envie de continuer à coder tout en apportant son expertise technique à une équipe. Le process pour nous rejoindre : simple et clair ! Échange RH : On discute de vos motivations et de l'adéquation avec nos valeurs (promis, pas de robotisation ici). Entretien opérationnel : Un échange approfondi pour clarifier vos missions. Proposition d'embauche : Si tout colle, on vous accueille officiellement chez Artemys ! Conditions et rémunération : 44 000 - 48 000 € (Selon votre expertise) Poste basé à Rouen (76) Télétravail partiel en fonction de la politique interne de l'entreprise Sans négliger les avantages indispensables : Carte SWILE (Tickets Restaurant, transports et CE). Mutuelle Groupe, Participation Groupe. Accompagnement RH, suivi managérial de proximité (Méthode Agile) Événements entreprise : Afterworks, Tech Meetups, soirées d'intégration, events sportifs, soirées gaming… Bienvenue dans l'aventure ARTEMYS Chez nous, chaque talent compte. Peu importe votre âge, vos origines, votre identité, votre religion ou votre orientation : ce qui nous intéresse, c'est vous et ce que vous avez à apporter. On s'engage à répondre à toutes les candidatures. Et ici, l'inclusion n'est pas qu'un mot : tous nos postes sont ouverts aux personnes en situation de handicap, et on fait tout pour créer un environnement où chacun peut s'épanouir. Prêt, feu, candidatez !
Voir cette offre
Freelance

Mission freelanceAdministrateur Big Data Cloudera H/F

HELIS
Publiée le
Big Data
Cloudera

3 ans
La Défense, Île-de-France
Il aura la charge de gérer une architecture Lakehouse : • Data security : Apache Ranger • Data governance : Apache Atlas • Data processing : Spark, Apache Zeppelin • Data ingestion : nifi • Data analytics : Apache Impala • Data lake : hadoop, Apache KUDO • Dara serving: Hue Gestions des logs via la stack ELK (Elasticsearch-Logstash-Kibana) Provisionner des infrastructures via Terraform Connaissance réseaux (Mise en place et ouverture de flux réseau basé sur le dossier d'architecture réseau) Il documente les procédures d'exploitation et rédige des rapports synthétisés Il assure du bon fonctionnement des services dans le respect des SLA. Il connait et s'appuie sur les process ITIL (Gestion des incidents, des problèmes et des demandes de changement) pour opérer dans des environnements de production. Il a un bon niveau d'anglais pour converser avec les éditeurs dont Cloudera et les fournisseurs Il automatise les déploiements de fichiers de configurations, gestion des certificats et keystores via Ansible. Il utilise les Outils devops de versionning et de packages : Github, Jenkins Sa maitrise des environnements sous Linux lui permet d'analyser les logs dans le cadre du traitement des incidents. Il est force de proposition pour l'amélioration de l'exploitabilité des solutions et de la supervision des services. Il participe aux réunions d'équipe et rend compte des actions Il participe aux projets et aux différents comités.
Voir cette offre
Freelance

Mission freelanceData Engineer Databricks (H/F)

Cherry Pick
Publiée le
Azure
Databricks
PySpark

12 mois
530-550 €
Île-de-France, France
En quelques motsCherry Pick est à la recherche d'un "Data Engineer Databricks (H/F) " pour un client dans le secteur du Retail Description🏢 Le Contexte : Passer à l'Échelle la Data Factory Supply ChainAu sein de la filiale informatique d'un groupe majeur de la grande distribution, la Data Factory réunit les équipes IT et les directions métiers pour concevoir, développer et déployer des produits analytiques et Data Science à forte valeur ajoutée. Afin de répondre à une demande croissante, l'organisation s'industrialise et adopte un modèle Agile à l'échelle (Domaines, Tribus, Squads). Vous intégrerez la squad Supply / Logistique, responsable de la création de cas d'usage stratégiques dédiés à l'optimisation des flux, à la gestion des entrepôts et à la performance logistique. Nous recherchons un(e) Data Engineer Confirmé / Senior évoluant sur une plateforme Cloud Azure / Databricks. Ce poste exige une réelle polyvalence : au-delà de la construction des pipelines de données, vous serez le garant de la qualité (QA/Testing) et participerez activement à la restitution décisionnelle. 🎯 Vos Missions : Pipelines, Data Warehouse, QA & RestitutionRattaché(e) à la squad Supply Chain, vos activités couvrent tout le cycle de vie de la donnée : 1. Data Engineering & Cloud Architecture (Majeure) : Concevoir et construire de manière industrielle les pipelines de données (ETL/ELT) pour transformer, enrichir et ingérer les données dans le Data Lake. Développer des notebooks Databricks (Spark / Python) pour assurer des traitements massifs complexes. Mettre en œuvre et optimiser les solutions de Cloud Data Warehousing (tuning de requêtes SQL, modélisation de tables). Assurer la livraison continue des développements dans un environnement DevOps intégrant les processus CI/CD (Azure DevOps). 2. QA, Testing & Qualité de Code : Assurer la QA et le testing des pipelines développés par le second Data Engineer de la squad. Concevoir et exécuter les tests unitaires, d'intégration et de non-régression. Réaliser des revues de code rigoureuses pour garantir le respect des bonnes pratiques et des standards d'ingénierie. 3. Data Analyse & Restitution Decisionnelle : Participer au recueil des besoins métiers et mener les analyses de données en amont. Concevoir et développer les tableaux de bord sous Power BI pour restituer les indicateurs Supply Chain aux opérationnels. Rédiger la documentation technique (Dossiers d'Analyse Technique, release notes).
Voir cette offre
CDI

Offre d'emploiDATA OPS / CDI / (H/F)

FINAXYS
Publiée le
Ansible
Apache Kafka
Hadoop

Boulogne-Billancourt, Île-de-France
🚀 Qui sommes-nous ? Finaxys est un cabinet de conseil spécialisé dans les secteurs Banque, Finance et Assurance. Depuis plus de 15 ans, nous intervenons auprès des plus grandes institutions telles que BNP Paribas, Crédit Agricole, Société Générale, AXA, Malakoff Humanis, etc. en proposant des solutions technologiques innovantes (IA, Machine Learning, Data, Cloud, DevSecOps, etc.). Notre mission ? Accompagner nos clients dans leur transformation digitale et répondre aux défis IT les plus complexes grâce à l'expertise de nos équipes. 🎯 Votre mission : En tant que DataOps, vous rejoindrez les équipes techniques de nos clients grands comptes pour : Industrialiser et automatiser les déploiements avec Ansible Mettre en production de nouveaux clusters et mettre à l'échelle les clusters existants (scale horizontal et vertical) Documenter les offres Apporter une expertise technique aux utilisateurs de la plateforme Participer à la définition des architectures des futures briques de la plateforme Streaming Construire un MVP de ces services puis enrichir l'offre Prendre des éléments de la backlog qui ont été formalisés par le Squad Lead et mettre en œuvre les éléments de la backlog Réaliser l'intégration dans le SI (observabilité, alerting, gestion des droits, backup, etc) Rendre compte des difficultés auxquelles il est confronté et proposer des solutions pour les résoudre Participer à l'ensemble des rituels agiles de la Squad (Rétro, Démos, Pi Planning) Environnement technique / fonctionnel : Python, Java, Hadoop, Spark, Kafka, Flink, Kubernetes, Gitlab, Ansible, Vault, Artifactory, CI/CD, Jira
Voir cette offre
Freelance

Mission freelanceMachine Learning Engineer (MLE) Pricing

KUBE Partners S.L. - Pixie Services
Publiée le
Github
IA Générative
MLOps

1 an
450-600 €
Paris, France
Contexte de la mission Notre objectif est de transformer notre stratégie de pricing grâce à la donnée et à l'intelligence artificielle. Nous voulons passer d'une tarification traditionnelle à une tarification dynamique, plus intelligente et prédictive, capable d'équilibrer la rentabilité de l'entreprise et la perception de la valeur par nos clients. Pour porter cette ambition, au sein de notre équipe digital data Pricing nous concevons, développons et industrialisons les algorithmes et les produits Data qui piloteront nos prix de manière proactive et agile. Objectifs et livrables Le consultant interviendra sur un scope large, allant de l'analyse exploratoire à la mise en production (MLOps). Les chantiers majeurs identifiés pour les prochains mois sont : • Élasticité Prix: Optimisation des algorithmes d'élasticité prix existants, avec un focus majeur sur la modélisation pour le lancement de nouveaux produits. • Moteur de Promotion : Développement d'un algorithme d'optimisation des campagnes promotionnelles. • Tarification Dynamique : Analyses exploratoires préliminaires et formulation de propositions pour un moteur d'aide à la décision (Dynamic Pricing “home-made”). • Industrialisation & MLOps : Optimisation des modèles existants, intégration de nouvelles sources de données, APIzation et automatisation des pipelines (Ops). • Agent amélioration : Contribution sur notre agent pricing. • Monitoring : Mise en place d'un tracking robuste de la performance des modèles et de la qualité de la donnée. Nous recherchons un profil hybride et autonome, capable de naviguer entre la vision produit et la technique. Hard skills: • Core Tech : Maîtrise avancée de Python et de son écosystème Data Science / ML (Pandas, Scikit-Learn, TensorFlow/PyTorch). • ML Engineering & MLOps : Expérience solide en mise en production d'algorithmes à grande échelle, packaging de modèles, CI/CD (Git) et industrialisation d'API. • Data & Cloud : Pratique des environnements Cloud (AWS / Databricks appréciés) et manipulation de gros volumes de données (Spark, dbt). Soft skills: • Product Ownership & Proactivité : Capacité à creuser le besoin métier, clarifier les exigences et proposer des solutions concrètes sans attendre un cahier des charges figé. • Leadership technique : Autonomie pour piloter des sujets de bout en bout et interagir avec des interlocuteurs variés (équipes Data, Tech et Métier). • Langues : Anglais courant indispensable. Une expérience préalable ou un fort background sur des problématiques de Pricing (élasticité, yield management, optimisation de marge) sera grandement valorisée.
Voir cette offre
Freelance
CDI

Offre d'emploiData Engineer Confirmé / Senior – Azure / Databricks

Gamme solutions
Publiée le
Databricks

1 an
Île-de-France, France
Expérience5 ans minimum en Data Engineering 🚀 DémarrageDès que possible – au plus tard fin septembre 2026 🏠 Télétravail2 jours de télétravail / semaine 3 jours de présence obligatoire sur site / semaine 🎯 Contexte de la missionAu sein de la Direction des SI Mutualisés, l'équipe DataLab intervient sur les périmètres Data & Analytics dans le cadre du programme de transformation du SI du Groupement Les Mousquetaires. Le consultant intégrera la Data Factory, qui regroupe les équipes Data de la Stime et des métiers. Cette organisation a pour objectif de concevoir et déployer des produits Data, BI, Analytics et Data Science à destination des fonctions support, des équipes logistiques, des magasins et des consommateurs. Dans un contexte de passage à l'échelle et d'industrialisation des pratiques Data, vous rejoindrez une Squad Supply / Logistique, en charge du développement de cas d'usage BI, Analytics et Data Science sur une plateforme Data basée sur Microsoft Azure et Databricks. 🎯 Description de la missionNous recherchons un Data Engineer Confirmé / Senior, polyvalent et opérationnel, disposant d'une solide expertise sur : Azure Databricks Apache Spark Python SQL Le consultant devra également avoir une forte appétence pour l'analyse de données et être capable d'intervenir sur les activités de QA et de testing, afin de garantir la qualité et la fiabilité des livrables de la Squad. Une expérience sur Power BI ainsi qu'une première expérience dans un environnement Supply Chain / Logistique seront fortement appréciées. 🔧 Missions principalesRecueillir et analyser les besoins Data Réaliser des analyses de données Concevoir et développer des pipelines de données Transformer, enrichir et traiter les données au sein du Data Lake Développer des notebooks Databricks pour les traitements avancés Concevoir et optimiser les traitements Data Mettre en œuvre des solutions de Cloud Data Warehousing Optimiser les requêtes SQL et réaliser le tuning des traitements Rédiger la documentation technique : dossiers d'analyse technique, release delivery notes, etc. Participer aux revues de code Garantir l'application des bonnes pratiques de développement Concevoir et exécuter les tests unitaires Réaliser les activités de QA / testing des pipelines développés par les autres Data Engineers de la Squad Concevoir et maintenir des tableaux de bord Power BI Livrer les développements dans un environnement DevOps / CI-CD Participer à l'amélioration continue des pratiques Data Engineering 🧩 Compétences techniques requisesCompétenceExpérience minimaleExpérience Data Engineering5 ansAzure3 ansDatabricks3 ansSpark3 ansPython5 ansSQL5 ansCI/CD – Azure DevOps3 ansAgile / JIRA1 an ⭐ Compétences appréciéesPower BI Expérience Supply Chain / Logistique Data Lake / Cloud Data Warehouse Optimisation et performance des traitements Data QA / Data Quality / Testing Environnement Agile à l'échelle
Voir cette offre

Au service des talents IT

Free-Work est une plateforme qui s'adresse à tous les professionnels des métiers de l'informatique.

Ses contenus et son jobboard IT sont mis à disposition 100% gratuitement pour les indépendants et les salariés du secteur.

Free-workers
Ressources
A propos
Espace recruteurs
2026 © Free-Work / AGSI SAS
Suivez-nous