Find your next tech and IT Job or contract Big Data

What you need to know about Big Data

Big Data refers to the massive and complex data generated at high speed by various sources, such as social networks, IoT sensors, online transactions, or mobile applications. This data, often voluminous, heterogeneous, and continuously growing, exceeds the capabilities of traditional management and analysis tools. Big Data relies on the 3Vs: Volume (quantity of data), Velocity (speed of generation and processing), and Variety (diversity of formats, structured or not). It is often associated with a fourth V: Veracity (data reliability). Big Data technologies, such as Hadoop, Spark, or NoSQL, enable storing, processing, and analyzing this data to extract valuable insights. These analyses are used in various fields, such as personalized marketing, finance, healthcare, or industrial optimization. Big Data plays a key role in innovation, decision-making, and digital transformation of businesses.

Your search returns 108 results.
Contractor
Permanent
Fixed term

Job VacancyBusiness Analyst DATA Confirmé – Référentiels Market Data / Static Data

KEONI CONSULTING
Published on
Apache Kafka
API
Big Data

18 months
20k-40k €
500 €
Paris, France
Contexte Contexte de la mission Au sein de la direction Tech Expertises & Solutions, le consultant rejoindra l'équipe en charge de la gestion des Référentiels Transverses. Cette équipe accompagne les différentes lignes métiers dans leurs usages des données de référence et intervient sur les processus d'acquisition, de consolidation, de distribution et de consommation des données d'entreprise. Nous recherchons un Business Analyst confirmé pour intervenir principalement sur les référentiels : Market Data : taux de change, taux interbancaires ; Static Data : caractéristiques des produits financiers. Ces référentiels sont fortement consommés par les différents métiers au travers de multiples technologies et canaux : API, Datalake, Kafka, fichiers et Mainframe. Missions principales La mission s'articulera autour de trois axes majeurs. 1. Refonte des référentiels Market Data – RATES V2 Finaliser la refonte des référentiels de taux de change et taux interbancaires ; Participer à la modernisation de la plateforme afin de traiter l'obsolescence technologique de l'existant ; Recueillir, analyser et formaliser les besoins ; Produire les spécifications fonctionnelles ; Rédiger les spécifications selon l'approche BDD – Behaviour Driven Development ; Collaborer avec les équipes techniques intervenant notamment sur Java, Angular, Python et Kafka ; Participer aux phases de recette et de validation de la solution. 2. Support utilisateurs RATES V2 Une fois la nouvelle plateforme RATES V2 mise en production : Assurer le support fonctionnel auprès des utilisateurs ; Analyser les problématiques rencontrées ; Accompagner les utilisateurs dans l'appropriation de la nouvelle plateforme ; Faire le lien entre les métiers et les équipes techniques. 3. Refonte du référentiel Resyproc Cadrer et conduire la refonte du Référentiel des produits de synthèse – Resyproc ; Analyser l'existant et les besoins d'évolution ; Recueillir et challenger les besoins des métiers ; Participer à la modernisation de l'interface et des fonctionnalités d'administration ; Accompagner les métiers Finance et Risques concernés par le référentiel. Resyproc intervient notamment dans les couches d'alimentation et de reporting des fonctions : Comptabilité ; Liquidité ; Prudentiel ; Pilotage financier ; Risques. Compétences et expériences requises Compétences particulièrement importantes : Expérience significative en tant que Business Analyst ou Product Owner ; Expérience en environnement projet Agile ; Bonne connaissance de l'approche BDD – Behaviour Driven Development ; Expérience significative dans la conception et le testing de traitements de transformation et d'alimentation de données ; Recueil, analyse et formalisation des besoins ; Rédaction de spécifications fonctionnelles ; Recette fonctionnelle et tests ; Bonne compréhension des problématiques Data / Référentiels / Flux de données ; Maîtrise d'Office 365, Jira et Confluence ; Français et anglais indispensables. Environnement fonctionnel & technique Le consultant évoluera dans un environnement comprenant notamment : Market Data ; Static Data ; Référentiels de données ; Taux de change ; Taux interbancaires ; Produits financiers ; Finance / Risques ; API ; Datalake ; Kafka ; Fichiers ; Mainframe ; Java ; Angular ; Python.
View this job
Contractor

Contractor job 370 - Ingénieur Big Data Senior (2 postes)

Nicholson SAS
Published on
Ansible
CI/CD
Docker

3 years
550 €
Clipperton Island, France
Informations clés Localisation : Montpellier ou Guyancourt (78) — 2 jours de télétravail par semaine TJM max : 550 € Démarrage : ASAP Durée : Mission longue durée (projection jusqu'en 08/2029) Contexte de la mission Au sein du pôle Data & IA, vous intégrez l'équipe Big Data en charge de la conception et de l'exploitation de plateformes « as a service ». L'objectif est de déployer des architectures modernes, distribuées et hautement résilientes. En tant qu'Ingénieur Big Data Senior, vous participerez à la conception, l'implémentation et l'administration d'une infrastructure Cloud Hybride. Une solide expertise sur Google Cloud Platform (GCP) ainsi que sur les infrastructures On-Premise est requise. Le périmètre couvre l'ensemble du cycle de vie des services, de leur conception jusqu'à leur maintien en condition opérationnelle (MCO). Missions principales Infrastructures & Plateformes : Participer à la mise en œuvre, l'administration et l'optimisation continue de la plateforme Big Data et Data Engineering. Infrastructure as Code (IaC) : Développer et maintenir les scripts d'infrastructures avec Terraform et Terragrunt. CI/CD & GitOps : Automatiser et maintenir les pipelines de déploiement continu sous GitLab CI/CD, en appliquant les meilleures pratiques Cloud, DevOps et GitOps. MCO & Observabilité : Assurer le maintien en condition opérationnelle des plateformes, puis déployer et maintenir les outils de monitoring et d'alerting. Collaboration & Documentation : Travailler en synergie avec les équipes applicatives, infra et DevOps, et rédiger la documentation technique et d'exploitation.
View this job
Contractor

Contractor jobData Engineer GCP - R&D / Data & Omics - Freelance (H/F)

█ █ █ ██ █ █
Published on
Big Data
BigQuery
Gitlab

Paris, France

Imported from

Job from the tech market, identified automatically to give you a complete view of the opportunities.

Restricted access to the community

Join our platform to access the details of this job and get access to the best offers on the market.

View this job
Contractor

Contractor jobData Engineer Senior - Iceberg - Freelance (H/F)

█ █ █ ██ █ █
Published on
Apache Spark
Big Data
DevOps

Paris, France

Imported from

Job from the tech market, identified automatically to give you a complete view of the opportunities.

Restricted access to the community

Join our platform to access the details of this job and get access to the best offers on the market.

View this job
Permanent
Contractor

Job VacancyIngénieur Big Data Kestra Senior (H/F)

Signe +
Published on
Kestra

24 months
65k-70k €
465-700 €
Guyancourt, Ile-de-France
Rejoignez le pôle de modernisation data d'un acteur majeur du secteur bancaire pour intervenir au sein d'une équipe Big Data de haut niveau. Vous participerez à la conception, l'implémentation et l'administration d'une infrastructure cloud hybride hautement résiliente, combinant les forces de Google Cloud Platform et des infrastructures on-premise. Le pôle conçoit et opère des plateformes « as a service » facilitating la mise en place d'architectures modernes, distribuées et hautement disponibles pour l'ensemble des entités du groupe. Vous évoluerez dans un environnement technologique riche, centré sur l'automatisation, l'infrastructure as code et les bonnes pratiques DevOps et GitOps, au sein d'équipes agiles et collaboratives. Le périmètre couvre l'ensemble du cycle de vie des services : de leur conception jusqu'à leur maintien en condition opérationnelle. Vous travaillerez en étroite collaboration avec les équipes applicatives, infrastructures et DevOps, dans un contexte de sécurité renforcée et de haute disponibilité. Responsabilités : - Participer à la mise en œuvre, l'optimisation et l'évolution de la plateforme Big Data - Développer et maintenir l'infrastructure as code avec Terraform et Terragrunt - Automatiser et maintenir les pipelines CI/CD sous GitLab - Administrer et faire évoluer les plateformes Big Data et Data Engineering - Mettre en œuvre les orchestrateurs de workflows (Kestra, Stratus) pour l'automatisation des traitements data - Mettre en place et maintenir les outils de monitoring et d'observabilité (Prometheus, Grafana, ELK) - Assurer le maintien en condition opérationnelle des plateformes en environnement distribué - Collaborer à la mise en œuvre des bonnes pratiques Cloud, DevOps et GitOps - Produire la documentation technique et d'exploitation - Participer à l'amélioration continue et proposer des optimisations architecturales Télétravail : 2 jours par semaine Localisation : Montpellier ou Guyancourt
View this job
Contractor
Permanent
Fixed term

Job VacancyDéveloppeur Python Confirmé – Data / ETL / Référentiels

KEONI CONSULTING
Published on
API
Big Data
ETL (Extract-transform-load)

18 months
20k-40k €
450 €
Paris, France
Contexte Séniorité : 6 à 9 ans d'expérience Profil : Développeur Python confirmé – Data / ETL La mission se déroulera au sein de l'équipe en charge de la gestion des Référentiels Transverses du Groupe , rattachée à la direction Tech Expertises & Solutions. Cette équipe accompagne les différentes lignes métiers dans leurs usages des données de référence et intervient notamment sur les processus d'acquisition, de consolidation, de transformation, de distribution et de consommation des données. Dans le cadre de l'harmonisation des langages de programmation et des architectures applicatives, un programme de migration des ETL Informatica PowerCenter vers Python est actuellement mené sur plusieurs applications. Nous recherchons un Développeur Python confirmé pour intervenir notamment sur : L'Annuaire Pages Blanches du Groupe ; L'Organigramme du Groupe ; Le Référentiel des rôles (RCI). Les applications Annuaire et Organigramme exploitent les données issues des référentiels Identités et Organisations. Les traitements permettent notamment de transformer les données entrantes, de les préparer puis de les injecter en base afin de permettre leur exposition sur l'intranet. Sur le référentiel RCI, les traitements concernent notamment : L'acquisition, la transformation et le chargement des données ; La gestion du cycle de vie des rôles ; L'exposition des données de référence vers différentes plateformes via fichiers, API et Datalake. Missions principales Le consultant aura quatre responsabilités principales : 1. Design des traitements Concevoir les nouveaux traitements sur les différentes applications ; S'appuyer sur les spécifications produites par les Business Analysts ; Prendre en compte les orientations et retours du Tech Lead ; Participer à la conception technique des solutions. 2. Développement Python Développer les nouveaux traitements de données ; Respecter le framework Python interne ; Intervenir dans une architecture applicative conteneurisée ; Garantir la qualité et la structuration des développements ; Participer à la migration des traitements existants d'Informatica PowerCenter vers Python. 3. Tests & qualité Réaliser les tests unitaires ; Mettre en place les tests automatisés sur les différents traitements ; Garantir la qualité des développements avant livraison. 4. Livraison & déploiement Réaliser les livraisons sur les environnements d'UAT ; Préparer et rédiger la documentation nécessaire aux livraisons sur les environnements supérieurs ; Accompagner le référent lors des différentes phases de livraison. Environnement de travail Le consultant intégrera une Squad Python composée de développeurs et de Tech Leads répartis entre Paris et Porto. L'organisation fonctionne en mode Agile, avec des sprints de trois semaines. L'anglais est donc indispensable pour collaborer efficacement avec les membres de l'équipe basés au Portugal, notamment le Tech Lead. Compétences techniques requises Compétences indispensables : Python 3.9+ Programmation orientée objet – OOP SQLAlchemy Oracle Database Pytest Pandas Développement de traitements de transformation et d'alimentation de données Environnement CI/CD automatisé OpenShift Utilisation de buckets S3 Tests unitaires et automatisés Jenkins Bitbucket Checkmarx Jira Confluence
View this job
Contractor
Permanent

Job VacancyIngénieur Data Spark/Scala H/F

Aleysia
Published on
Apache Spark
Big Data
Data Lake

1 year
40k-73k €
400-600 €
Nanterre, Ile-de-France
Le contexteDans le cadre du maintien en conditions opérationnelles et de l'évolution d'un environnement Big Data / Datalake décisionnel, nous recherchons un(e) Ingénieur Data Spark/Scala – Gestion courante afin d'accompagner l'un de nos clients sur des enjeux de suivi d'exploitation, correction d'incidents et évolution de traitements Data. Quelques éléments pour mieux comprendre l'environnement : Secteur d'activité : Assurance 🛡️ Organisation : Équipe de Gestion Courante Décisionnel au sein de la Direction des Études Enjeux : Assurer le maintien de la qualité de service sur un périmètre applicatif décisionnel développé en Spark/Scala, en assurant le suivi des traitements, la résolution des incidents et la mise en œuvre des évolutions. Ce que tu feras concrètementDans le cadre de cette mission, tu seras notamment amené(e) à : ➞ Assurer le suivi quotidien des traitements en Spark/Scala ➞ Analyser et corriger les incidents fonctionnels, avec leurs éventuelles reprises de données ➞ Réaliser les évolutions confiées sur le périmètre ➞ Tester les corrections d'incidents et les développements réalisés ➞ Mettre à jour la documentation et assurer la mise en production des corrections et développements Ton environnementTechnologies : Spark, Scala, Hadoop, Hive, HDFS, YARN, Oozie, Parquet, Kafka, Spark Streaming, MongoDB, JSON, Avro Outils : Cloudera, Git Bases de données : Oracle
View this job
Contractor

Contractor jobDATA ENGINEER MARKETING - Freelance (H/F)

█ █ █ ██ █ █
Published on
Apache Kafka
Big Data
BigQuery

Saint-Denis, Ile-de-France

Imported from

Job from the tech market, identified automatically to give you a complete view of the opportunities.

Restricted access to the community

Join our platform to access the details of this job and get access to the best offers on the market.

View this job
Contractor

Contractor jobData Engineer (H/F)

Insitoo Freelances
Published on
Azure Data Factory
Big Data
JIRA

2 years
350-410 €
Lyon, Auvergne-Rhône-Alpes
Basée à Lille, Lyon, Nantes, Grenoble, Marseille, Paris et Bruxelles, Insitoo Freelances est une société du groupe Insitoo, spécialisée dans le placement et le sourcing des Freelances IT et Métier. Depuis 2007, Insitoo Freelances a su s'imposer comme une référence en matière de freelancing par son expertise dans l'IT et ses valeurs de transparence et de proximité. Actuellement, afin de répondre aux besoins de nos clients, nous recherchons un Data Engineer (H/F) à Lyon, France. Contexte : Les missions attendues par le Data Engineer (H/F) : Rédaction des spécifications fonctionnelles afin de couvrir l'ensemble des exigences métiers et IT (IHM, interfaces, ...) Elaborer des cahiers de tests détaillés permettant de couvrir l'ensemble des fonctionnalités de l'outil et des interfaces; Participer à la recette avec les différents interlocuteurs : métiers et leurs DSI, équipe projet. Contribuer à la mise à jour de la cartographie applicative existante et cible, Rédiger et/ou contribuer aux livrables du projet : spécifications fonctionnelles, users stories, conception de service, dans le respect des priorités données par le référent fonctionnel applicatif du domaine pour respecter les jalons Rédiger les cahiers de tests Contribuer aux qualifications et recettes Contribuer à la mise en production Reporter au référent fonctionnel applicatif du domaine et aux instances opérationnelles (comités, suivi de recette) et alerter si besoin Produire les documents nécessaire à l'exploitation de la solution (procédures et mode opératoires pour le mode run dont conception de service). Expérience significative dans la gestion de flux financiers (virements, prélévements, flux bancaires)
View this job
Contractor
Permanent
Fixed term

Job VacancyDirecteur de Projet Data & BI – Delivery Leader - Financing & Risk

KEONI CONSULTING
Published on
Agile Method
Big Data
Product Ownership

18 months
20k-40k €
700 €
Paris, France
Contexte Séniorité : Plus de 9 ans d'expérience La mission se déroulera au sein de l'IT Financing & Risk, dans l'équipe Data & Business Intelligence. Cette équipe développe FinLake, un Data Lake destiné aux métiers des financements. Le consultant interviendra dans le cadre du programme Spark, programme de modernisation du SI des financements, afin de suivre et piloter les différentes initiatives IT/Data associées. Le profil recherché occupera un rôle de Delivery Leader, à l'interface entre les métiers, les Product Owners et les équipes IT/Data. Missions 1. Gestion de la relation avec les métiers Recueillir et consolider les besoins métiers. Définir les priorités avec les Product Owners. Recueillir les feedbacks métiers afin d'adapter les sprints suivants. Communiquer auprès des métiers et utilisateurs finaux sur les priorités, budgets et nouvelles demandes. Être capable d'interagir avec des interlocuteurs de haut niveau, notamment les Directions Métiers et CODIR. 2. Pilotage du backlog et accompagnement de l'équipe Construire et communiquer le backlog produit avec les Product Owners. S'assurer de la clarté et de la qualité des besoins et User Stories. Challenger les demandes. Organiser et mener les revues d'avancement et de priorisation. Traduire les attentes métiers auprès des équipes IT/Data. 3. Pilotage du delivery et de la production Accompagner l'équipe dans l'atteinte de ses objectifs. Suivre le delivery. Veiller à la qualité et à la stabilité de la production. Identifier et suivre les points de vigilance. Produire les KPI nécessaires au pilotage de l'activité. Ces responsabilités correspondent directement aux trois grands axes définis dans le CDC : relation métiers, transmission/priorisation des besoins auprès de l'équipe et support au delivery/production.
View this job
Permanent

Job VacancyData Scientist

█ █ █ ██ █ █
Published on
Apache Spark
Big Data
CI/CD

London, England, United Kingdom

Imported from

Job from the tech market, identified automatically to give you a complete view of the opportunities.

Restricted access to the community

Join our platform to access the details of this job and get access to the best offers on the market.

View this job
Permanent

Job VacancySenior Data Engineer

█ █ █ ██ █ █
Published on
Apache Spark
Big Data
CI/CD

London, England, United Kingdom

Imported from

Job from the tech market, identified automatically to give you a complete view of the opportunities.

Restricted access to the community

Join our platform to access the details of this job and get access to the best offers on the market.

View this job

Contract roles and jobs for Big Data

Data Scientist

The Data Scientist uses Big Data tools and techniques to analyze large datasets, develop predictive models, and extract useful insights from complex data.

Data Developer (BI / Big Data / Data Engineer)

The Data Developer (Decision Support / BI / Big Data / Data Engineer) designs and develops Big Data solutions to store, process, and analyze large amounts of data from various sources.

Architecture Consultant

The Architecture Consultant advises businesses on Big Data architecture, designing solutions to manage and analyze large data quantities while optimizing performance and scalability.

Data Analyst

The Data Analyst uses Big Data techniques to collect, analyze, and interpret complex data to provide insights and recommendations that help businesses make informed decisions.

Connecting Tech-Talent

Free-Work, THE platform for all IT professionals.

Free-workers
Resources
About
Recruiters area
2026 © Free-Work / AGSI SAS
Follow us