Find your next tech and IT Job or contract Big Data

What you need to know about Big Data

Big Data refers to the massive and complex data generated at high speed by various sources, such as social networks, IoT sensors, online transactions, or mobile applications. This data, often voluminous, heterogeneous, and continuously growing, exceeds the capabilities of traditional management and analysis tools. Big Data relies on the 3Vs: Volume (quantity of data), Velocity (speed of generation and processing), and Variety (diversity of formats, structured or not). It is often associated with a fourth V: Veracity (data reliability). Big Data technologies, such as Hadoop, Spark, or NoSQL, enable storing, processing, and analyzing this data to extract valuable insights. These analyses are used in various fields, such as personalized marketing, finance, healthcare, or industrial optimization. Big Data plays a key role in innovation, decision-making, and digital transformation of businesses.

Your search returns 74 results.
Contractor

Contractor job📩 Data Engineer Python / Big Data

Gentis Recruitment SAS
Published on
AWS Cloud
Big Data
CI/CD

12 months
Paris, France
Nous recherchons pour l'un de nos clients grands comptes du secteur de l'énergie un Data Engineer Python / Big Data afin d'intervenir sur le développement d'une plateforme Big Data robuste et scalable, destinée à centraliser, normaliser et distribuer des indicateurs métiers à l'échelle internationale. Contexte de la mission La plateforme a pour objectif de gérer un volume important de données provenant de plusieurs pays. Elle permettra de centraliser différents indicateurs, de standardiser les vues et de faciliter leur exploitation par les différentes parties prenantes. Le consultant interviendra au sein d'une équipe majoritairement basée à Paris, avec de possibles déplacements ponctuels à Lyon et Bruxelles. Missions principales Dans le cadre de cette mission, vous serez amené à : Concevoir et développer des composants de data ingestion. Participer au traitement, à la normalisation et à l'optimisation des données. Mettre en place des pipelines de distribution de données vers différents consommateurs. Contribuer à l'amélioration du framework commun : monitoring, CI/CD, tests, performance, résilience, qualité de code. Appliquer les standards internes en matière d'architecture et de développement. Collaborer avec les équipes projets afin de promouvoir les bonnes pratiques techniques. Participer à la conception d'une architecture Big Data scalable et maintenable. Compétences attendues Python V3 Big Data Architecture & Technologies Datalake Data pipelines Data modeling CI/CD Testing Monitoring Performance optimization Environnements distribués AWS Cloud, un plus
View this job
Contractor

Contractor jobChef de Projet Data & Urbanisation SI – Transformation MDM

Okara
Published on
Big Data
Master Data Management (MDM)

3 months
Lille, Hauts-de-France
🎯 Okara cherche un·e Chef de Projet Data & Urbanisation SI – Transformation MDM / RH L'enjeu : Devenir le chef d'orchestre des flux de données RH et de l'urbanisation applicative chez l'un des leaders mondiaux de la grande distribution. Dans le cadre du déploiement global d'un nouvel outil phare de gestion des ressources humaines (Workday) , l'objectif est de piloter le déploiement de nouveaux référentiels en masse selon un modèle MDM (Master Data Management). Ton terrain de jeu ? Une équipe dynamique de 7 personnes. Tu travailleras en binôme hyper soudé (avec spécialisation et backup mutuel) pour faire le pont entre les collaborateurs RH, leur profil informatique et leurs usages dans un écosystème SI ultra-riche. Ton périmètre ? La France, mais aussi des relais IT locaux dans 24 pays! 🚀 Ton rôleTu es au centre de la matrice. Ton rôle combine l'analyse d'impacts techniques, la gestion de projet et une bonne dose de change management auprès de populations IT. Concrètement, la mission s'articule autour de 3 axes majeurs : Détection proactive & Analyse d'impacts (Directs & Indirects) : Cartographier le SI pour identifier les applications impactées par les modifications du référentiel RH. Tu traques aussi bien les impacts directs que les cas d'usages indirects (données relayées de la suite de gestion des identités vers une application, qui elle-même la relaye). Tu analyses les impacts avec les équipes concernées et pilotes l'avancement des chantiers d'adaptation. Cadrage & Approche MDM : Préparer le déploiement des nouveaux référentiels partout où cela apporte de la valeur. Tu identifies les use cases, estimes de manière macro les enveloppes budgétaires requises et permets la budgétisation à court terme des projets à plus long terme. Animation & Change Management IT : Créer des supports de communication, médias et guides pour rendre tes interlocuteurs IT le plus autonomes possible. Tu gères les interviews, les réunions de groupe, animes les débats d'architecture (avec l'appui d'architectes pour les cas complexes) et assures le suivi de l'avancement via des indicateurs de pilotage que tu définiras. (En bonus : tu pourras être amené·e à contribuer ponctuellement à l'animation des chantiers de qualité de la data avec les relais locaux).
View this job
Contractor
Permanent

Job VacancyDéveloppeur Python Big Data (H/F)

AVA2I
Published on
Cassandra
Git
Linux

3 years
40k-45k €
400-550 €
Ile-de-France, France
Dans le cadre du développement d'une plateforme de traitement de données à grande échelle, nous recherchons un Développeur Python Big Data pour rejoindre une équipe technique intervenant sur des projets à forte volumétrie de données. Vous participerez à la conception, au développement et à l'évolution d'applications permettant de collecter, traiter, stocker et exploiter des données complexes au sein d'un environnement moderne et innovant. Vos responsabilitésConcevoir, développer et maintenir des applications en Python. Développer des traitements de données performants dans un environnement Big Data. Concevoir et optimiser les modèles de données. Participer à l'intégration et à l'exploitation de bases de données relationnelles et NoSQL. Développer des API et des services permettant l'exploitation des données. Participer à la modélisation de graphes de connaissances et de données sémantiques. Optimiser les performances des traitements et des requêtes. Réaliser les tests unitaires et garantir la qualité du code. Participer aux revues de code et aux bonnes pratiques de développement. Collaborer avec les équipes Data, Architecture et Infrastructure dans un environnement Agile. Environnement techniquePython PostgreSQL Cassandra RDF (Resource Description Framework) PHP C++ Git Linux API REST SQL Méthodologies Agile Pourquoi rejoindre ce projet ?Vous intégrerez une équipe d'experts travaillant sur des problématiques Big Data ambitieuses, au sein d'un environnement stimulant où les technologies de gestion, de traitement et d'exploitation des données occupent une place centrale. Vous contribuerez à des projets innovants en mettant à profit vos compétences en développement, en architecture de données et en optimisation des performances.
View this job
Permanent

Job VacancyLead Data Engineer

█ █ █ ██ █ █
Published on
Apache Kafka
Apache Spark
Big Data

Imported from

Job from the tech market, identified automatically to give you a complete view of the opportunities.

Restricted access to the community

Join our platform to access the details of this job and get access to the best offers on the market.

View this job
Premium Job
Contractor

Contractor jobIngénieur / Architecte IA Senior

WERIN GROUP DIGITAL
Published on
AI Agent
Big Data
CI/CD

6 months
500-550 €
Levallois-Perret, Ile-de-France
Contexte de la mission Au sein de l'international Digital Factory, nous amorçons une transformation profonde de nos processus de delivery pour passer d'un modèle traditionnel à une "Agentic Factory". L'objectif est d'intégrer massivement l'IA agentique au cœur du cycle de vie de nos applications pour atteindre trois objectifs industriels : une documentation technique nativement auto-mise à jour, une couverture de tests automatisés proche de 100%, et un saut historique en matière de productivité et de qualité logicielle. Le premier jalon critique de cette transformation sera l'application immédiate de ces méthodes sur un cas concret et urgent : la reprise en main, la cartographie et la rétro-documentation flash d'une application stratégique complexe en phase de transition RH. Nous recherchons un Architecte IA Senior / Ingénieur IA capable de concevoir cette vision cible tout en délivrant des résultats opérationnels dès ses premiers jours. Missions principales 1. Phase 1 : Sauvetage Tactique et Reverse-Engineering (Urgence Immédiate) Déployer et configurer des environnements d'IA agentique pour le code (type Cursor Enterprise, Claude Code, ou équivalents sécurisés) pour indexer 100% des repositories d'une application stratégique en transition. Automatiser la création de cartographies de dépendances, de schémas d'architecture dynamiques (Mermaid/UML) et de fiches de sûreté technique. Mettre en place un pipeline d'ingestion (LLM/RAG) pour traiter, structurer et rendre interrogeables les sessions de transfert de compétences (transcriptions vidéo, wikis, tickets). 2. Phase 2 : Initialisation de l'Agentic Factory (Moyen Terme) Zéro Dette de Documentation : Concevoir et implémenter les workflows IA permettant de générer et de mettre à jour la documentation technique de manière totalement autonome à chaque commit/pull-request. Qualité Totale (Objectif 100% Tests) : Déployer des agents IA spécialisés dans la génération autonome de plans de tests, de tests unitaires et de bout en bout pour couvrir l'intégralité du patrimoine applicatif. Accélération des Devs : Accompagner et outiller nos hubs de développement (Inde, Mexique) dans l'adoption des agents de codage pour maximiser la vélocité et élever les standards de qualité du code. 3. Phase 3 : Gouvernance et Architecture Cible Définir la stack technologique de la future plateforme d'ingénierie assistée par IA de la Digital Factory. Évaluer, maquetter et arbitrer la solution industrielle cible en fonction de nos assets d'entreprise et des contraintes de sécurité (Scénarios : Databricks, Dataiku, LLM souverains ou outils managés Cloud).
View this job
Permanent

Job VacancyData & AI Engineer

Big Apps
Published on
AI
Apache
Apache Airflow

Rosny-sous-Bois, Ile-de-France
Data & AI Engineer (Data Engineering / AI Engineering) Qui sommes-nous ? Fondée par des experts techniques et portée par des passionnés de l'IT, Big APPS est une société de conseil spécialisée dans la Data, le Cloud, le DevOps et l'Intelligence Artificielle (IA). Nous accompagnons nos clients dans leurs projets de transformation digitale en concevant des plateformes de données performantes et des solutions innovantes basées sur l'IA. Nous intervenons sur des projets à forte valeur ajoutée en mettant en œuvre les technologies les plus récentes et les meilleures pratiques du marché. Dans le cadre de notre croissance, nous recherchons un(e) Data & AI Engineer pour renforcer nos équipes. Vos missions En tant que Data & AI Engineer, vous serez amené(e) à : Concevoir, développer et maintenir des plateformes de données robustes et évolutives. Développer et optimiser des pipelines de données (ETL/ELT). Concevoir des architectures Data sur Azure, AWS ou GCP. Préparer, transformer et valoriser les données pour les projets d'IA. Développer, intégrer et industrialiser des modèles de Machine Learning et d'IA générative. Participer au déploiement des modèles en production (MLOps). Collaborer avec les équipes métiers, Data Science et Cloud. Mettre en œuvre les bonnes pratiques DevOps, CI/CD et Infrastructure as Code. Garantir la qualité, la sécurité et la disponibilité des données. Que vous soyez Data Engineer, AI Engineer, Data Scientist ou déjà doté(e) d'une double compétence Data & IA, vous souhaitez intervenir sur des projets innovants mêlant Data Engineering, Machine Learning, IA Générative et Cloud ? Rejoignez Big APPS !
View this job
Contractor
Permanent

Job VacancyData engineer DevOps sur Saint-Quentin-en-Yvelines

EterniTech
Published on
Apache Spark
AWS Cloud
Dataiku

3 months
Yvelines, France
La mission consiste à contribuer à la conception, l'industrialisation, l'exploitation et l'évolution des plateformes et services Data. Le consultant interviendra aussi bien sur les projets DATA que sur les activités de RUN. Il devra être capable de travailler dans un environnement technique large, sans nécessairement être expert sur chaque technologie, mais avec une bonne culture Data / Big Data / DevOps / Cloud. Une forte capacité d'autonomie, de curiosité et de proposition est attendue afin d'accompagner les équipes dans leurs choix techniques et leur évolution. MISSIONS PRINCIPALESParticiper aux projets Data et aux activités de RUN. Concevoir et faire évoluer les solutions Data Engineering. Participer à l'industrialisation et à l'automatisation des traitements et infrastructures. Développer et maintenir les pipelines CI/CD. Participer à la gestion et à l'exploitation des environnements Docker / Kubernetes. Automatiser les opérations à l'aide d'Ansible et/ou Terraform. Intervenir sur les bases de données SQL Server, PostgreSQL et MongoDB. Participer à l'exploitation et à l'évolution des environnements Big Data. Contribuer aux sujets Cloud public AWS / GCP. Participer à la supervision et à l'observabilité des plateformes. Analyser les problématiques de production et contribuer à leur résolution. Proposer des améliorations techniques et opérationnelles. Challenger l'existant et orienter les choix techniques lorsque nécessaire. Collaborer avec les équipes Data, DevOps, infrastructure et projets.
View this job
Contractor

Contractor jobData Engineer Teradata (F/H)

CELAD
Published on

1 year
380-400 €
Nantes, Pays de la Loire
A LIRE ATTENTIVEMENT AVANT DE POSTULER ⬇ 📑 Portage / Freelance - 🏠 2.5 jours de télétravail / semaine - 📍 Nantes - 🛠 Expérience de 3 ans minimum Nous poursuivons notre développement et recherchons actuellement un.e Data Engineer pour accompagner l'un de nos clients, issu du bancaire, intervenant sur des applications critiques liées au risque de crédit. 💻💼 Contexte : Vous participerez au développement et à l'évolution d'un Datawarehouse central qui alimente les processus métiers et le reporting réglementaire. Votre rôle : Au quotidien, vos missions seront les suivantes : Analyser les besoins fonctionnels en lien avec les équipes métier Concevoir et développer les composants techniques Participer à la mise en place et à l'évolution des Datamarts Garantir la qualité, la fiabilité et la disponibilité des données Développer et maintenir les pipelines de traitement et d'intégration des données Réaliser les tests, les recettes et accompagner les mises en production Participer aux activités de maintenance corrective et évolutive ainsi qu'au RUN Contribuer à l'amélioration continue des pratiques de développement et de l'environnement technique Travailler au sein d'une équipe organisée en Agile (rituels, collaboration, amélioration continue) Environnement technique : Teradata SQL Linux / Shell Unix (ksh) Big Data / Datawarehouse / BI décisionnelle SAS IBM DB2 Mainframe (des connaissances sont un plus) Cloud (une première expérience est appréciée mais pourra être acquise durant la mission) Votre profil : Vous disposez d'au moins 3 ans d'expérience sur des projets Data, BI ou Big Data, et avez déjà travaillé avec Teradata (idéalement dans le cadre de migration) Une expérience sur des projets liés au secteur bancaire ou au risque de crédit serait un véritable atout, sans être indispensable.
View this job
Permanent

Job VacancyCHEF DE PROJET BI / DATA (H/F)

Savane Consulting
Published on

55k-65k €
Gennevilliers, Ile-de-France
Contexte du poste Dans le cadre de la transformation de son système d'information, notre client fait évoluer sa plateforme BI traditionnelle vers une plateforme Data Big Data et souhaite accompagner cette transformation par la mise en place de nouveaux usages autour de la donnée. Au sein de la DSI, vous rejoignez une équipe dédiée aux projets BI / Data et intervenez à la fois sur le pilotage des projets, l'AMOA, la conception fonctionnelle et le suivi des solutions en production. Vous travaillez en étroite collaboration avec les équipes métiers, les équipes Data et les prestataires externes, dans un environnement Agile. Missions principales Pilotage des projets BI / Data Réaliser les études d'opportunité et cadrer les projets avant décision Go / No Go. Piloter les projets de bout en bout : planning, budget, risques, qualité et coordination des contributeurs. Animer les comités projet et assurer le reporting auprès des parties prenantes. Coordonner les équipes métiers, techniques et les prestataires externes. Élaborer et suivre les charges projet en jours/homme. Analyse fonctionnelle et conception Data Recueillir et analyser les besoins métiers lors d'ateliers de cadrage. Traduire les besoins métiers en exigences fonctionnelles et techniques. Rédiger les expressions de besoins, spécifications fonctionnelles et User Stories. Construire et suivre le backlog produit ainsi que les sprints et releases. Participer à la définition des règles de gestion. Concevoir les Data Products : ingestion, modélisation et intégration au sein de la plateforme Data. Garantir la cohérence, la performance, l'exploitabilité et la continuité des solutions. Tests et déploiement Concevoir les scénarios et cas de tests. Réaliser les tests unitaires et d'intégration. Accompagner les métiers lors des phases de recette. Piloter les mises en production et accompagner les déploiements. Organiser la conduite du changement et, si nécessaire, former les utilisateurs. RUN et amélioration continue Assurer le maintien en condition opérationnelle des applications. Analyser les incidents et dysfonctionnements et proposer des actions correctives et préventives. Suivre et prioriser le backlog des évolutions. Assurer l'interface avec les équipes d'exploitation. Capitaliser la connaissance fonctionnelle et contribuer à l'amélioration continue des solutions. Gestion des partenaires et reporting Superviser les interventions des prestataires externes. Participer à la sélection et au pilotage des intervenants. Mettre en place des indicateurs de suivi : délais, coûts, qualité et satisfaction. Assurer un reporting régulier auprès du management. Environnement technique Data & Big Data : Kafka, Confluent Cloud, NiFi, Spark, Scala, Iceberg, Starburst, Kudu, Hadoop Data Platform : Cloudera, Databricks, Dataiku Orchestration : Airflow / Astronomer BI & Reporting : Power BI, SAP BI, Business Objects Bases de données : SQL Server, T-SQL Data Engineering : Data Warehouse, Data Mart, modélisation de données, ETL
View this job
Permanent

Job VacancyData Engineer Teradata (F/H)

CELAD
Published on

36k-42k €
Nantes, Pays de la Loire
A LIRE ATTENTIVEMENT AVANT DE POSTULER ⬇ 📑 CDI (36-42K€) - 🏠 2.5 jours de télétravail / semaine - 📍 Nantes - 🛠 Expérience de 3 ans minimum Nous poursuivons notre développement et recherchons actuellement un.e Data Engineer pour accompagner l'un de nos clients, issu du bancaire, intervenant sur des applications critiques liées au risque de crédit. 💻💼 Contexte : Vous participerez au développement et à l'évolution d'un Datawarehouse central qui alimente les processus métiers et le reporting réglementaire. Votre rôle : Au quotidien, vos missions seront les suivantes : Analyser les besoins fonctionnels en lien avec les équipes métier Concevoir et développer les composants techniques Participer à la mise en place et à l'évolution des Datamarts Garantir la qualité, la fiabilité et la disponibilité des données Développer et maintenir les pipelines de traitement et d'intégration des données Réaliser les tests, les recettes et accompagner les mises en production Participer aux activités de maintenance corrective et évolutive ainsi qu'au RUN Contribuer à l'amélioration continue des pratiques de développement et de l'environnement technique Travailler au sein d'une équipe organisée en Agile (rituels, collaboration, amélioration continue) Environnement technique : Teradata SQL Linux / Shell Unix (ksh) Big Data / Datawarehouse / BI décisionnelle SAS IBM DB2 Mainframe (des connaissances sont un plus) Cloud (une première expérience est appréciée mais pourra être acquise durant la mission) Votre profil : Vous disposez d'au moins 3 ans d'expérience sur des projets Data, BI ou Big Data, et avez déjà travaillé avec Teradata (idéalement dans le cadre de migration) Une expérience sur des projets liés au secteur bancaire ou au risque de crédit serait un véritable atout, sans être indispensable.
View this job
Permanent

Job VacancyTech Lead Talend (H/F)

Scalesys
Published on

Ile-de-France, France
📋 RÉSUMÉ En tant que Tech Lead Talend, vous serez responsable de la conception, du développement et de la maintenance de solutions d'intégration de données complexes basées sur Talend. Vous encadrerez une équipe technique et garantirez la qualité et la performance des livrables. 🎯 MISSIONS Concevoir et développer des flux d'intégration de données robustes et performants avec Talend (DI, DQ, Big Data). Assurer la conformité des développements aux standards techniques, aux meilleures pratiques et aux architectures définies. Réaliser des revues de code et valider les choix techniques de l'équipe. Encadrer techniquement les développeurs Talend, les accompagner dans leur montée en compétences et la résolution de problèmes complexes. Participer à la définition des architectures techniques et à l'évaluation des solutions. Optimiser les performances des traitements et garantir la qualité des données. Rédiger la documentation technique associée aux développements. Collaborer avec les équipes fonctionnelles, les architectes et les chefs de projet. 📦 LIVRABLES Solutions d'intégration de données Talend fonctionnelles, performantes et maintenables. Documentation technique complète et à jour. Montée en compétence et autonomie de l'équipe de développement. Résolution des incidents et problèmes techniques complexes. Respect des délais et des standards de qualité.
View this job

Contract roles and jobs for Big Data

Data Scientist

The Data Scientist uses Big Data tools and techniques to analyze large datasets, develop predictive models, and extract useful insights from complex data.

Data Developer (BI / Big Data / Data Engineer)

The Data Developer (Decision Support / BI / Big Data / Data Engineer) designs and develops Big Data solutions to store, process, and analyze large amounts of data from various sources.

Architecture Consultant

The Architecture Consultant advises businesses on Big Data architecture, designing solutions to manage and analyze large data quantities while optimizing performance and scalability.

Data Analyst

The Data Analyst uses Big Data techniques to collect, analyze, and interpret complex data to provide insights and recommendations that help businesses make informed decisions.

Connecting Tech-Talent

Free-Work, THE platform for all IT professionals.

Free-workers
Resources
About
Recruiters area
2026 © Free-Work / AGSI SAS
Follow us