Find your next tech and IT Job or contract PySpark

66 results
Contractor
Permanent

Job VacancyDATA ENGINEER SENIOR

UCASE CONSULTING
Published on
Amazon Redshift
Apache Spark
PySpark

1 year
40k-45k €
400-650 €
Ile-de-France, France
🚀 Data Engineer Senior – Big Data / Lakehouse / AWS Niveau : Senior Expérience : 8 ans minimum en Data Engineering Démarrage souhaité : ASAP Durée : 12 mois, renouvelable Rythme : 5 jours/semaine Télétravail : 3 jours/semaine 🎯 Contexte de la mission : Dans le cadre du renforcement de son pôle Data Services, notre client recherche un Data Engineer Senior pour accompagner la conception, l'industrialisation et l'évolution de ses solutions Data. Le consultant interviendra sur des sujets à forte dimension Data Engineering, Big Data et Lakehouse, avec notamment des problématiques d'architecture, de modélisation, d'optimisation des pipelines et d'industrialisation des traitements. Il contribuera également à l'évolution de la stratégie Lakehouse du client et devra être capable d'accompagner techniquement des profils plus juniors. 🔎 Missions Concevoir, développer et optimiser des pipelines de données à grande échelle Mettre en œuvre des flux batch, streaming et ingestion via API Structurer les données selon une architecture Médaillon (Bronze / Silver / Gold) Développer et industrialiser les transformations avec DBT, Spark et Iceberg Contribuer à l'évolution et à l'optimisation de l'architecture Lakehouse Déployer et maintenir les pipelines dans un environnement AWS Orchestrer les workflows ETL / ELT via Airflow Mettre en œuvre l'Infrastructure as Code avec Terraform Participer à la mise en place et au maintien de l'observabilité et de la supervision des traitements Définir et mettre en œuvre les règles de Data Quality : tests, contrôles et validations automatisées Participer à la gestion des incidents et à l'amélioration continue Documenter les architectures, pi
View this job
Contractor
Permanent

Job VacancyExpert Azure Databricks / Azure Batch (H/F)

Freelance.com
Published on
Azure
Databricks
PySpark

3 months
40k-45k €
400-600 €
Paris, France
1. Description du poste Dans le cadre du développement de projets Data et IA sur Microsoft Azure, nous recherchons un Expert Azure Databricks / Azure Batch pour concevoir, industrialiser et maintenir des plateformes de traitement de données à grande échelle. Le consultant interviendra sur des environnements Cloud exigeants, avec un fort niveau d'automatisation, de performance, de sécurité et de fiabilité. Il participera à la conception d'architectures Data modernes ainsi qu'au développement de solutions robustes et industrialisées. Ses principales responsabilités seront les suivantes : Concevoir et développer des pipelines de traitement de données distribués sous Azure Databricks. Développer des notebooks, workflows et composants techniques en Python et PySpark. Optimiser les performances des traitements Databricks et des jobs distribués. Concevoir des architectures Lakehouse basées sur Delta Lake. Industrialiser et orchestrer des traitements massifs avec Azure Batch. Configurer les pools de calcul et les stratégies d'exécution adaptées aux besoins. Optimiser la parallélisation, la distribution de charge et la consommation des ressources. Mettre en place des solutions de monitoring, d'observabilité et de gestion des incidents. Développer des librairies Python réutilisables, maintenables et testées. Réaliser des tests unitaires, d'intégration et de performance. Participer aux revues de code et à l'amélioration continue des pratiques de développement. Mettre en œuvre des pipelines CI/CD et automatiser les déploiements. Développer et maintenir l'Infrastructure as Code avec Terraform et/ou Bicep. Garantir la qualité, la sécurité et la conformité des déploiements. Accompagner les équipes projet dans l'adoption des standards Cloud, Data Engineering et DevOps.
View this job
Permanent
Fixed term

Job VacancyAnalytics Engineer

Espritek
Published on
Data analysis
PySpark
Python

3 years
Paris, Island of France
Nous recherchons un Analytics Engineer pour intervenir au sein d'une équipe Data dédiée aux usages digitaux en magasin d'un grand acteur international du retail. L'équipe a pour objectif d'exploiter la donnée afin d'améliorer l'efficacité des équipes opérationnelles en magasin et de leur permettre de prendre de meilleures décisions. Vous interviendrez sur l'ensemble de la chaîne de transformation et de modélisation de la donnée, avec un rôle fortement orienté Analytics Engineering. Vos principales responsabilités : • Automatiser et industrialiser les pipelines de transformation de données alimentant les dashboards, analyses Data et modèles IA ; • Construire et modéliser la semantic layer sur des domaines métier notamment liés à la Supply Chain et à la Production ; • Maintenir, optimiser et repenser les datasets et pipelines existants afin de répondre à de nouveaux cas d'usage ; • Construire des datasets robustes, fiables et facilement exploitables ; • Garantir la qualité des données exposées ; • Participer aux choix techniques et à l'évolution de la stack Data ; • Intégrer les enjeux de data lineage, de gouvernance et de documentation ; • Contribuer aux communautés Analytics Engineering et Data Engineering. Environnement technique : AWS, Databricks, Glue, S3, dbt, Airflow, SQL, Python, Scala, PySpark, Great Expectations, Git, GitHub, CI/CD, Make.
View this job
Permanent

Job VacancyData Engineer F/H

█ █ █ ██ █ █
Published on
Apache Kafka
AWS Glue
Azure Data Factory

Imported from

Job from the tech market, identified automatically to give you a complete view of the opportunities.

Restricted access to the community

Join our platform to access the details of this job and get access to the best offers on the market.

View this job
Contractor

Contractor job464 - Lead Data Engineer - Grade C2

Nicholson SAS
Published on
Azure
Azure Data Factory
CI/CD

12 months
510 €
France
Lead Python Data Engineer (H/F) – Projet Data & Analytics Démarrage : ASAP (mission longue jusqu'au 12/11/2027) Localisation : Full Remote (France) TJM cible : Max. 510 € HT (selon profil) Contexte & Rôle Rejoignez un projet Data & Analytics d'envergure pour un acteur majeur international du secteur des services. Poste résolument hands-on : vous codez, concevez et portez les choix d'architecture sur votre périmètre. Missions principales Concevoir, développer et optimiser des data pipelines robustes en Python. Manipuler, nettoyer et transformer des volumes de données complexes (Pandas, NumPy, DataFrames). Appliquer les standards Software Engineering : Clean Code, modularité, CI/CD, tests unitaires et d'intégration. Prendre le lead technique : ownership des solutions, code reviews et accompagnement des Data Engineers plus juniors. Collaborer étroitement avec les équipes Produit, Data Analysts et Data Scientists. Profil recherché Expertise cœur (indispensable) : Maîtrise avancée de Python appliqué au Data Engineering (Pandas, NumPy, SQL, optimisation de performances, Data Quality). Environnement apprécié (non bloquant) : Connaissance de l'écosystème Azure (Data Factory, Data Lake, DevOps), Databricks, PySpark, Delta Lake ou dbt. Posture : Capacité avérée à fédérer techniquement et à garantir l'excellence opérationnelle du code produit.
View this job
Contractor

Contractor job456 - Data Analyst Senior SQL / BigQuery – Grade C2

Nicholson SAS
Published on
BigQuery
CI/CD
DevOps

1 year
450 €
Ile-de-France, France
Data Analyst Senior SQL / BigQuery – Grade C2 Localisation : IDF Présence sur site : 2 jours par semaine Démarrage : ASAP Fin de mission : 30/11/2027 TJM : 450 € Expérience : Plus de 7 ans Contexte de la mission Au sein d'une équipe Data & Analytics, vous contribuerez à la conception et à la réalisation d'analyses permettant d'accompagner les équipes métier dans leurs prises de décision. Vous interviendrez sur des problématiques business nécessitant une forte capacité d'analyse, de traitement et d'interprétation des données, avec pour objectif de produire des recommandations fiables et exploitables par les différentes parties prenantes. Missions principales Comprendre les problématiques métier et les traduire en plans d'analyse structurés et opérationnels. Réaliser des analyses quantitatives complexes à l'aide de SQL et Python : collecte, nettoyage, traitement, analyse et interprétation des données. Concevoir et maintenir des tableaux de bord dédiés au suivi de la performance. Présenter les résultats et formuler des recommandations auprès d'interlocuteurs de haut niveau, notamment des directions métier. Synthétiser et formaliser les conclusions et décisions issues des analyses. Contribuer à l'amélioration continue des méthodes et processus d'analyse. Garantir la qualité technique et analytique des travaux réalisés. Livrables attendus Analyses quantitatives et restitutions associées. Présentations et recommandations métier. Fichiers de travail et supports d'analyse. Tableaux de bord sous Looker / Tableau.
View this job
Contractor

Contractor jobData Engineer Senior / Expert – Spark, AWS, dbt, Iceberg (H/F)

AI&DATA
Published on
Amazon S3
Apache Airflow
Apache Spark

9 months
550-650 €
Nantes, Pays de la Loire
Contexte Dans le cadre du renforcement de l'équipe Marketing Data au sein du pôle Data Fabric d'un acteur majeur du numérique et des mobilités, nous recherchons un consultant Data Engineer Senior / Expert capable d'intervenir de manière autonome sur la conception, l'industrialisation et l'exploitation de produits et pipelines Data. La mission s'inscrit dans un environnement Lakehouse AWS, avec des enjeux de qualité, performance, fiabilité des traitements et maîtrise du RUN. Missions principales • Concevoir, développer et optimiser des pipelines de données. • Développer et industrialiser les traitements avec Spark/PySpark, Python, SQL et dbt. • Exploiter des données au format Apache Iceberg dans une architecture Lakehouse / Medallion. • Orchestrer les traitements avec Airflow. • Déployer et maintenir les traitements sur AWS et contribuer à l'Infrastructure as Code avec Terraform. • Mettre en œuvre les contrôles de Data Quality, tests et mécanismes d'observabilité. • Participer au RUN, à l'analyse des incidents et au traitement des causes racines. • Contribuer à la documentation, au Data Lineage, aux Data Contracts et au Data Catalog. • Travailler avec les Product Owners et interlocuteurs métier pour traduire les besoins Marketing en solutions Data robustes et maintenables. Livrables • Pipelines Data développés, testés et industrialisés ; transformations Spark et modèles dbt ; workflows Airflow. • Infrastructure Terraform nécessaire aux traitements. • Tests automatisés, contrôles de Data Quality, monitoring et alerting. • Documentation technique et fonctionnelle, documentation des modèles et règles métier. • Contribution aux Data Contracts, lineage et métadonnées. • Analyse et résolution des incidents, plans de remédiation. • Contribution aux standards et bonnes pratiques Data Engineering de l'équipe. Modalités • Lieu : Nantes – temps plein, 3 jours de télétravail par semaine • Déplacements et astreintes : occasionnels • Démarrage : dès que possible – fin estimée : 31/08/2027
View this job
Contractor
Permanent

Job VacancyData engineer Databricks

UCASE CONSULTING
Published on
Apache Spark
AWS Cloud
Azure

3 years
40k-71k €
400-550 €
Ile-de-France, France
Data Engineer Senior — Databricks — Descriptif du poste Dans le cadre du développement de nos activités data, nous recrutons un Data Engineer Senior spécialisé sur la plateforme Databricks. Vous intervenez sur la conception et l'industrialisation de plateformes de données lakehouse : vous cadrez les besoins avec les équipes métiers, vous définissez les architectures cibles, vous construisez les pipelines d'ingestion et de transformation, et vous assurez leur mise en production ainsi que leur optimisation en coût et en performance. Vous êtes l'interlocuteur technique direct des équipes métiers sur votre périmètre et vous accompagnez la montée en compétences des profils plus juniors. — Parmi vos missions 🛠 Concevoir et industrialiser les plateformes de données sur Databricks Concevoir des architectures lakehouse en couches (bronze / silver / gold) sur Delta Lake Développer et optimiser les pipelines d'ingestion et de transformation en PySpark et en SQL Industrialiser les traitements avec Databricks Workflows, Delta Live Tables et une chaîne CI/CD Optimiser les coûts et les performances : dimensionnement des clusters, partitionnement, Photon, gestion du cache Mettre en place la gouvernance et la qualité des données Structurer Unity Catalog : catalogues, schémas, gestion des droits, lignage Définir les règles de qualité, les tests et le monitoring des pipelines en production Documenter les modèles de données et les contrats d'interface avec les systèmes amont et aval Cadrer les besoins avec les équipes métiers Animer les ateliers de recueil de besoins et traduire les exigences en solutions data Préconiser les architectures cibles et arbitrer les choix techniques (batch ou streaming, build ou buy) Présenter et défendre vos recommandations auprès des interlocuteurs techniques comme métiers Piloter la livraison et faire monter l'équipe en compétences Piloter un lot de bout en bout : conception, chiffrage, livraison, respect des délais Encadrer les profils juniors en revue de code et en pair programming Diffuser les bonnes pratiques d'engineering : versioning, tests, revue, documentation — Modalités pratiques Lieu : Ile de France Type de contrat : CDI Date de démarrage : A définir Télétravail : Fonction des contraintes opérationnelles (en moyenne : 2 jours)
View this job
Contractor
Permanent

Job VacancyIngénieur Python – Databricks / Dataiku DSS / Delta Lake

OBJECTWARE
Published on
Databricks
Dataiku
GitLab CI

3 years
48k-98k €
400-750 €
Ile-de-France, France
Profil recherchéVous disposez d'une solide expérience en développement Python et en conception logicielle. Vous maîtrisez les principes de programmation orientée objet et savez concevoir des composants modulaires, réutilisables et maintenables. Vous avez une expérience significative dans le traitement de données volumineuses et l'optimisation de calculs. Vous maîtrisez les tests automatisés, les bonnes pratiques de développement et les processus d'intégration continue. Vous avez déjà travaillé avec au moins un framework de calcul distribué : Ray, PySpark ou Dask. Vous êtes capable d'analyser du code existant, d'en évaluer la qualité et de garantir sa conformité aux standards techniques. Qualités attenduesRigueur technique : capacité à faire respecter les standards de développement et de qualité, notamment lors de l'intégration de code produit par des tiers. Autonomie et adaptabilité : aptitude à investiguer des environnements complexes, à résoudre des problèmes techniques et à appréhender de nouveaux outils. Pragmatisme : capacité à concilier qualité logicielle, performance et contraintes de mise en production. Communication : aisance dans les échanges avec des interlocuteurs techniques et métier. Anglais technique : capacité à exploiter la documentation et à échanger avec des équipes internationales. Les connaissances de l'écosystème Azure, des problématiques réseau et de sécurité ainsi que des plateformes Databricks et Dataiku DSS constitueront des atouts supplémentaires.
View this job

Connecting Tech-Talent

Free-Work, THE platform for all IT professionals.

Free-workers
Resources
About
Recruiters area
2026 © Free-Work / AGSI SAS
Follow us