Find your next tech and IT Job or contract Big Data

What you need to know about Big Data

Big Data refers to the massive and complex data generated at high speed by various sources, such as social networks, IoT sensors, online transactions, or mobile applications. This data, often voluminous, heterogeneous, and continuously growing, exceeds the capabilities of traditional management and analysis tools. Big Data relies on the 3Vs: Volume (quantity of data), Velocity (speed of generation and processing), and Variety (diversity of formats, structured or not). It is often associated with a fourth V: Veracity (data reliability). Big Data technologies, such as Hadoop, Spark, or NoSQL, enable storing, processing, and analyzing this data to extract valuable insights. These analyses are used in various fields, such as personalized marketing, finance, healthcare, or industrial optimization. Big Data plays a key role in innovation, decision-making, and digital transformation of businesses.

Your search returns 79 results.
Premium Job
Contractor
Permanent

Job VacancyData Engineer

VISIAN
Published on
Azure
Azure Data Factory
Azure DevOps Services

1 year
Paris, France
La Direction des Systèmes d'Information recrute un Data Engineer pour concevoir, développer et maintenir les architectures Data nécessaires à l'exploitation des données par les analystes métiers et data scientists. Principales missions : - Mener les projets d'intégration (temps réel) et data (big data & insights) - Comprendre, analyser et proposer des solutions techniques répondant aux besoins des divers acteurs de la donnée (spécialistes métier, domain managers, architecte, data analystes et scientists) - Apporter un éclairage technique sur les architectures Cloud, dialoguer avec les fournisseurs de solutions et les consultants techniques - Dans une logique de mise en production, créer et déployer des pipelines de données robustes pour les data scientists et data analysts (collecte, stockage, transformation et exploitation) - Assurer une bonne qualité des données pour les projets Machine Learning (préparation, complétude, épuration, enrichissement) dans le but d'optimiser les performances des modèles - Améliorer les processus internes : localisation et traçabilité de la donnée, standardisation des flux et des scripts de traitement des données, documentation - Collaborer avec les équipes basées aux Pays-Bas pour faciliter le Data-Sharing, échanger sur les best-practices et les moyens d'optimiser les architectures - Contribuer à l'amélioration de la gouvernance sur la protection et la confidentialité des données Conception et mise en œuvre d'une plateforme d'intégration Azure à grande échelle, servant de hub central pour 20+ applications métier et orchestrant ~150 flux d'intégration batch et temps réel répartis sur 7 ODS. Développement de flux d'intégration avec Azure Service Bus, Azure Functions, Event Grid et Azure Data Factory pour synchroniser les données entre les différents systèmes. Développement d'orchestrations distribuées et persistantes avec Azure Durable Functions pour gérer des processus métier asynchrones. Conception et gouvernance des API d'intégration via Azure API Management selon une approche spec-first avec validation des contrats d'échange. Modélisation et optimisation des ODS afin de garantir la cohérence et la disponibilité des données opérationnelles. Optimisation des requêtes SQL et des traitements de données pour améliorer les performances et la fiabilité des flux. Développement de composants mutualisés (librairies Python, modules Bicep et Terraform) afin de standardiser les développements et accélérer l'intégration de nouveaux flux. Mise en place des pipelines CI/CD, automatisation des déploiements et amélioration de l'observabilité via la standardisation des logs et des métriques personnalisées.
View this job
Contractor

Contractor jobData Scientist Python Software - London

Nexus Jobs Limited
Published on

£350-500
London, England, United Kingdom
Data Scientist and Python Software Developer - London We're looking to recruit a Data Scientist and Python Software Developer with data science skills to join a product team that is focused on building well engineered products. The products provide an intuitive way for retailers and suppliers to interact and consume 'big data' analytics to make better business decisions. This role would consist of working together with a team of statistical analysts, understanding their methodologies and algorithms, and turning them into production ready code written in Python. This role would also require occasional travel to Paris or Munich. Main skills: Excellent knowledge of Python and it's related data science libraries (scikit, pandas, etc) Prior experience of using Python to perform calculations and generate datasets Good statistical knowledge Excellent communication and decision making skills Exposure to working with REST API's Any of the following skills would be an added bonus: Has run code across Hadoop/MapReduce clusters Has code running in a production environment Used SAS before (or at least can decipher SAS code) Worked with very large data sets before (billions of records) Knowledge of SQL/NoSQL database Knowledge or experience in D3.js Experience acting as a mentor/trainer in Python This is 6 month assignment in London with travel to Paris and Munich. Please send your CV to us in Word format along with daily rate and availability.
View this job
Contractor

Contractor jobOps - Dataiku - Data Engineering, DevOps ou DataOps  Vitrolles

WorldWide People
Published on
Dataiku

6 months
Vitrolles, Provence-Alpes-Côte d'Azur
Ops - Data Engineering, DevOps ou DataOps Vitrolles ASAP Missions principales Assurer le maintien en conditions opérationnelles des plateformes Data. Gérer les incidents et les demandes des équipes projets et des utilisateurs. Participer à l'automatisation et à l'industrialisation des solutions. Réaliser les déploiements sur les différents environnements (intégration, préproduction, production). Contribuer à l'amélioration continue des outils d'exploitation et de déploiement. Participer au troubleshooting et à l'optimisation des performances des plateformes. Compétences requises Administration Dataiku Administration et optimisation Starburst / Trino Control-M (création de jobs, calendriers, dépendances, profiles de connexion) Cloud Public : AWS et/ou Azure DevOps et automatisation des déploiements Gestion des environnements de production critiques Compétences appréciées CI/CD Apache Airflow Kubernetes GitLab Grafana Power BI Docker Connaissances Agile / Scrum Notions de cryptographie Profil recherché Formation Bac+5 en informatique, systèmes d'information ou équivalent. Expérience de 3 à 7 ans dans des environnements Data Engineering, DevOps ou DataOps. Bonne capacité d'analyse et de résolution d'incidents. Autonomie, rigueur et esprit d'équipe. Appétence pour les environnements Big Data et Cloud. 2 seniors 2 confirmés
View this job
Permanent

Job VacancyDéveloppeur Microservices .NET / Angular – Data & IA

AVA2I
Published on
.NET
Angular
Python

Ile-de-France, France
Dans le cadre de l'accélération de sa transformation technologique et digitale, un grand groupe bancaire recherche un Développeur Microservices .NET / Angular confirmé. Le consultant intégrera une équipe internationale spécialisée dans les plateformes Data & IA, les architectures Big Data, les Data Lakes, les environnements Lakehouse Cloud, la Business Intelligence et le déploiement de solutions de Machine Learning Missions principalesConcevoir, développer et maintenir des microservices en C#/.NET Core 6+. Développer et intégrer des API REST selon les standards et patterns de l'équipe. Contribuer ponctuellement au développement d'interfaces front-end avec Angular. Participer aux choix d'architecture et à la conception technique des solutions. Réaliser les revues de code et garantir la qualité des développements. Développer et maintenir les pipelines CI/CD avec Jenkins et Groovy. Gérer les déploiements avec XLDeploy et XLRelease. Déployer et maintenir les applications conteneurisées sur OpenShift/Kubernetes. Utiliser Git et Bitbucket pour la gestion des versions et la collaboration. Rédiger et maintenir la documentation technique. Participer aux cérémonies Agile : Sprint Planning, Daily Meeting, revue et rétrospective. Collaborer quotidiennement avec les équipes basées en France et au Portugal. Compétences techniquesC# / .NET Core 6+ : niveau confirmé. Architecture microservices, API REST et design patterns : niveau confirmé. Jenkins, Pipeline as Code et Groovy : excellente maîtrise. XLDeploy / XLRelease : pratique courante. OpenShift / Kubernetes : pratique courante. Git / Bitbucket : excellente maîtrise. Angular : capacité à intervenir ponctuellement sur le front-end. Python : connaissances appréciées. Conteneurisation et environnements Cloud/Data : bonne compréhension.
View this job
Contractor

Contractor jobARCHITECTE TECHNIQUE ON PREMISE & CLOUD AZURE ET GCP

PROPULSE IT
Published on
Azure
Cloud

24 months
325-650 €
Paris, France
Nous recherchons plusieurs Architectes Technique OnPrem & Cloud pour une mission longue chez l'un de nos clients. Niveau expérimenté à senior requis. CONTEXTE DE LA MISSION Au sein de l'équipe Architecture de la Direction des Infrastructures et de la Production du groupe, le consultant contribuera aux activités : - Etudes techniques & Design - Cadrage budgétaire - Définition des best practices d'architecture - Documentation - Accompagnement de la stratégie Move2Cloud - Co-construction des solutions - Accompagnement des équipes d'exploitation et de développement Environnement général - Plateformes E-commerce - Plateformes BackOffice & Logistique - Cloud Public Azure & GCP - Cloud Privé (Infrastructure VMWARE Infogérée) - CDN Akamai, LoadBalancing BigIP F5, Firewalling (Checkpoint & Fortinet) - Bases de données MS SQL Server, PostgreSQL, MySQL, IBM DB2, Oracle - Big Data Hadoop, Terradata, MapR, BigQuery, DataBricks - Conteneurisation Docker & Orchestration AKS - Progiciels SAP, Siebel, HRAccess DESCRIPTION DE LA MISSION - Etude des besoins issus des équipes de développement - Etude de l'évolution des composants de plateformes techniques ou de l'intégration de nouveaux services - Rédaction des documents d'architecture et d'intégration générale et détaillée - Rédaction des supports d'aide à l'exploitation et accompagnement des équipes d'exploitation durant la transition - Contribution à l'évaluation budgétaire des solutions mises en œuvre - Support N3 des équipes d'exploitation Démarrage souhaité : au plus tôt Durée de la mission : Longue Paris
View this job
Contractor

Contractor jobDéveloppeur.se Microservices .NET / Angular / Kubernetes (H/F)

CELAD
Published on

1 year
400-425 €
Paris, France
Envie d'un nouveau challenge… CELAD vous attend ! 🚀 Nous poursuivons notre développement et recherchons actuellement un.e Développeur.se Microservices .NET / Angular / Kubernetes pour intervenir chez l'un de nos clients. Vous intégrerez l'équipe Data AI Plateforme & Architecture, composée d'experts spécialisés dans les architectures et solutions Data, les plateformes Big Data, les environnements Datalake / LakeHouse Cloud, la Business Intelligence / Analytics ainsi que les solutions de Machine Learning. L'équipe évolue dans un contexte international, avec des collaborateurs basés notamment à Paris et Porto. 💼 Vos principales missions Au sein de l'équipe, vous serez amené.e à : Développer et maintenir des microservices en .NET / C# en respectant les standards et bonnes pratiques de l'équipe ; Participer ponctuellement aux développements front-end avec Angular ; Contribuer à la conception technique des solutions et participer aux revues de code ; Intégrer et maintenir les pipelines CI/CD avec notamment Jenkins, XLDeploy et XLRelease ; Participer au déploiement et au maintien des applications sur des environnements OpenShift / Kubernetes ; Rédiger et maintenir la documentation technique associée aux développements ; Participer aux différentes cérémonies Agile : sprint planning, daily meetings, rétrospectives, etc. ; Collaborer avec les équipes internationales dans un environnement technique stimulant.
View this job
Permanent

Job VacancyDéveloppeur.se Microservices .NET / Angular / Kubernetes (H/F)

CELAD
Published on

Paris, France
Envie d'un nouveau challenge… CELAD vous attend ! 🚀 Nous poursuivons notre développement et recherchons actuellement un.e Développeur.se Microservices .NET / Angular / Kubernetes pour intervenir chez l'un de nos clients. Vous intégrerez l'équipe Data AI Plateforme & Architecture, composée d'experts spécialisés dans les architectures et solutions Data, les plateformes Big Data, les environnements Datalake / LakeHouse Cloud, la Business Intelligence / Analytics ainsi que les solutions de Machine Learning. L'équipe évolue dans un contexte international, avec des collaborateurs basés notamment à Paris et Porto. 💼 Vos principales missions Au sein de l'équipe, vous serez amené.e à : Développer et maintenir des microservices en .NET / C# en respectant les standards et bonnes pratiques de l'équipe ; Participer ponctuellement aux développements front-end avec Angular ; Contribuer à la conception technique des solutions et participer aux revues de code ; Intégrer et maintenir les pipelines CI/CD avec notamment Jenkins, XLDeploy et XLRelease ; Participer au déploiement et au maintien des applications sur des environnements OpenShift / Kubernetes ; Rédiger et maintenir la documentation technique associée aux développements ; Participer aux différentes cérémonies Agile : sprint planning, daily meetings, rétrospectives, etc. ; Collaborer avec les équipes internationales dans un environnement technique stimulant.
View this job
Contractor
Permanent

Job VacancyData engineer DevOps sur Saint-Quentin-en-Yvelines

EterniTech
Published on
Apache Spark
AWS Cloud
Dataiku

3 months
Yvelines, France
La mission consiste à contribuer à la conception, l'industrialisation, l'exploitation et l'évolution des plateformes et services Data. Le consultant interviendra aussi bien sur les projets DATA que sur les activités de RUN. Il devra être capable de travailler dans un environnement technique large, sans nécessairement être expert sur chaque technologie, mais avec une bonne culture Data / Big Data / DevOps / Cloud. Une forte capacité d'autonomie, de curiosité et de proposition est attendue afin d'accompagner les équipes dans leurs choix techniques et leur évolution. MISSIONS PRINCIPALESParticiper aux projets Data et aux activités de RUN. Concevoir et faire évoluer les solutions Data Engineering. Participer à l'industrialisation et à l'automatisation des traitements et infrastructures. Développer et maintenir les pipelines CI/CD. Participer à la gestion et à l'exploitation des environnements Docker / Kubernetes. Automatiser les opérations à l'aide d'Ansible et/ou Terraform. Intervenir sur les bases de données SQL Server, PostgreSQL et MongoDB. Participer à l'exploitation et à l'évolution des environnements Big Data. Contribuer aux sujets Cloud public AWS / GCP. Participer à la supervision et à l'observabilité des plateformes. Analyser les problématiques de production et contribuer à leur résolution. Proposer des améliorations techniques et opérationnelles. Challenger l'existant et orienter les choix techniques lorsque nécessaire. Collaborer avec les équipes Data, DevOps, infrastructure et projets.
View this job
Permanent

Job VacancyChef de Projet AMOA Data H/F

CELAD
Published on

35k-42k €
Brest, Brittany
Envie d'un nouveau challenge... CELAD vous attend ! Nous poursuivons notre développement et recherchons actuellement un(e) Chef de Projet AMOA Data H/F pour intervenir chez un de nos clients. Contexte : Vous rejoindrez une équipe Data intervenant sur des sujets liés à la collecte, la structuration et l'exploitation des données clients, avec des enjeux importants autour de la qualité des données, du pilotage et de la relation client. Vous participerez notamment à des projets Data, à la maintenance évolutive des solutions ainsi qu'au suivi quotidien de la production. L'environnement combine des problématiques Data, AMOA, BI et Big Data, dans un contexte fonctionnel exigeant. Votre mission : Au sein d'une équipe projet, vous serez en charge de : - Assurer le suivi quotidien de la production et réaliser les contrôles fonctionnels de cohérence des données - Participer aux ateliers de définition des indicateurs et des données nécessaires aux besoins métiers - Contribuer à la modélisation des bases de données et des architectures - Rédiger les spécifications fonctionnelles des indicateurs - Élaborer les stratégies et plans de recette - Réaliser les recettes fonctionnelles et analyser la cohérence des données via SQL ou R - Participer aux projets Data et aux évolutions des solutions existantes - Concevoir des reportings simples avec des outils de Dataviz - Manipuler et analyser des données complexes - Assurer la documentation des travaux réalisés
View this job
Permanent

Job VacancyTech Lead Talend (H/F)

Scalesys
Published on

Ile-de-France, France
📋 RÉSUMÉ En tant que Tech Lead Talend, vous serez responsable de la conception, du développement et de la maintenance de solutions d'intégration de données complexes basées sur Talend. Vous encadrerez une équipe technique et garantirez la qualité et la performance des livrables. 🎯 MISSIONS Concevoir et développer des flux d'intégration de données robustes et performants avec Talend (DI, DQ, Big Data). Assurer la conformité des développements aux standards techniques, aux meilleures pratiques et aux architectures définies. Réaliser des revues de code et valider les choix techniques de l'équipe. Encadrer techniquement les développeurs Talend, les accompagner dans leur montée en compétences et la résolution de problèmes complexes. Participer à la définition des architectures techniques et à l'évaluation des solutions. Optimiser les performances des traitements et garantir la qualité des données. Rédiger la documentation technique associée aux développements. Collaborer avec les équipes fonctionnelles, les architectes et les chefs de projet. 📦 LIVRABLES Solutions d'intégration de données Talend fonctionnelles, performantes et maintenables. Documentation technique complète et à jour. Montée en compétence et autonomie de l'équipe de développement. Résolution des incidents et problèmes techniques complexes. Respect des délais et des standards de qualité.
View this job
Contractor
Permanent

Job VacancyDéveloppeur Microservices .NET / Angular / Python / Conteneur

Hexagone Digitale
Published on
.NET
Angular
Bitbucket

7 months
40k-45k €
280-370 €
Charenton-le-Pont, Ile-de-France
Contexte Le client, acteur du secteur bancaire, dispose d'un service transverse d'expertises technologiques (Cloud, API, Data & IA, Blockchain, Low Code/No Code) organisé autour de Factories, d'un centre Agile, d'un Lab' Innovation et de référentiels transverses, au service de l'ensemble des métiers du groupe. La mission s'inscrit au sein d'une équipe Data AI Plateforme & Architecture, experte sur les architectures et plateformes Data (socles Big Data, Datalake, LakeHouse Cloud public, Business Intelligence/Analytics, outillage ML), basée à Paris et Porto. Le besoin porte sur le développement et la maintenance de microservices .NET, avec une contribution ponctuelle au front-end Angular et une intégration dans la chaîne CI/CD et l'orchestration de conteneurs (OpenShift/Kubernetes). Rôle et responsabilités principales Développer et maintenir des microservices en .NET (C#) selon les standards de l'équipe Contribuer ponctuellement à des développements front-end Angular Participer à la conception technique et aux revues de code Intégrer et maintenir les pipelines CI/CD (Jenkins, XLDeploy, XLRelease) Assurer le bon déploiement des applications sur OpenShift (Kubernetes) Rédiger la documentation technique associée Participer aux cérémonies Agile (sprint planning, daily, rétrospective) Livrables attendus Documentation technique associée aux développements réalisés Contribution au code applicatif (microservices .NET, contributions Angular) Contribution aux pipelines CI/CD (configuration Jenkins, XLDeploy, XLRelease)
View this job

Contract roles and jobs for Big Data

Data Scientist

The Data Scientist uses Big Data tools and techniques to analyze large datasets, develop predictive models, and extract useful insights from complex data.

Data Developer (BI / Big Data / Data Engineer)

The Data Developer (Decision Support / BI / Big Data / Data Engineer) designs and develops Big Data solutions to store, process, and analyze large amounts of data from various sources.

Architecture Consultant

The Architecture Consultant advises businesses on Big Data architecture, designing solutions to manage and analyze large data quantities while optimizing performance and scalability.

Data Analyst

The Data Analyst uses Big Data techniques to collect, analyze, and interpret complex data to provide insights and recommendations that help businesses make informed decisions.

Connecting Tech-Talent

Free-Work, THE platform for all IT professionals.

Free-workers
Resources
About
Recruiters area
2026 © Free-Work / AGSI SAS
Follow us