Trouvez votre prochaine offre d’emploi ou de mission freelance Apache Spark

167 résultats
Freelance

Mission freelanceBusiness Analyst/Product Owner Data Référentiel Application Sénior

VISIAN
Publiée le
Analyse
Product Ownership

1 an
350-680 €
Paris, France
Dans le cadre d'une mission de continuité opérationnelle, une entreprise recherche un Data Analyst afin de renforcer ses équipes sur un environnement Data & Cloud. Les informations disponibles à ce stade permettent d'identifier un environnement principalement orienté autour de la gestion, préparation, modélisation et analyse des données, ainsi que de la production de reportings et d'indicateurs. Le contexte fonctionnel précis et les enjeux détaillés de la mission sont encore en cours de consolidation. Des échanges complémentaires avec le client permettront de préciser le périmètre, les priorités et l'organisation de l'équipe. Missions principalesParticiper à la préparation, la transformation et la structuration des données. Réaliser des analyses de données et produire des indicateurs pertinents. Participer à la modélisation des données. Concevoir et maintenir des rapports et tableaux de bord. Contribuer à la gestion et à la qualité des données. Recueillir et analyser les besoins fonctionnels et techniques. Rédiger les spécifications fonctionnelles et techniques. Participer aux phases de mise en production. Contribuer au cadrage et au suivi des sujets projet. Participer aux comités de pilotage et au suivi des objectifs. Accompagner et former les utilisateurs sur les solutions mises en place. Collaborer avec les équipes métiers et techniques. Environnement techniqueOutils : Microsoft Power BI Microsoft Excel Microsoft Power Query Git Apache Airflow Langages et technologies : SQL Python DAX Pandas Scikit-learn Apache Spark JavaScript Frameworks / bibliothèques : Plotly TensorFlow Bases de données : Google Cloud BigQuery MariaDB MySQL Cloud : Google Cloud Platform (GCP)
Voir cette offre
Freelance
CDI

Offre d'emploiData Engineer Confirmé

R&S TELECOM
Publiée le
Data Engineering
Git
Javascript

6 mois
Courbevoie, Île-de-France
Contexte de la mission Au sein de la DSI France, le département SI METIER & DATA souhaite renforcer sa capacitée à réaliser des projets Data. Au sein de l'équipe Data et de l'équipe projet, le Data Engineer réalise les intégrations de données, les traitements et les reportings dans PALANTIR Foundry. Il propose et recherche les meilleurs solutions techniques en collaboration avec l'équipe projet et participe au suivi quotidien des flux de données. Le projet concerne en particulier le traitement de données de consommations IT. Objectifs et livrables Comprendre les besoins métier et faire les investigations nécessaires pour une réalisation optimale Concevoir et réaliser les développements et configurations dans Palantir Documenter les réalisation, présenter le résultat et participer aux recettes Intégrer l'équipe BI, travailler en collaboration avec tous les membres et participer à la communité technique. Participer au suivi quotidien des applications Pour cette mission, l'expertise et les compétences attendues sont : · Manipulation et traitement des données : Python · Création de dashboard et fonction d'affichage (JavaScript/TypeScript) · Cloud, Base de données, stockage, automatisation · Framework SPARK · Manipulation d'APIs, etc... · Outil de versionning (GIT) · Comprendre la structure des bases de données mises en place (architecture en étoile, relation 1-N ou N-N..) · Methode Agile / Jira · Connaissance de PALANTIR serait un plus · Anglais : niveau professionnel · Outils bureautique : intermédiaire ou expert (faire un CR, une présentation,…) Compétences demandéesCompétencesNiveau de compétence JIRA / Agile Confirmé Data Engineering Expert AI-assisted development Confirmé Python/pyspark Expert LanguesNiveau de langue Anglais Courant
Voir cette offre
CDI

Offre d'emploiEmbedded Software Test Engineer

Rise Technical Recruitment Ltd
Publiée le

£50k-60k
South Oxfordshire, Royaume-Uni
Embedded Software Test Engineer Witney, Oxfordshire Hybrid - 3 days a week on-site (Commutable from Oxford, Carterton, Burford, Chipping Norton, Faringdon, Abingdon, Swindon and Cirencester) £50,000 - £60,000 + Hybrid Working + SPARK Ada Training + Formal Methods Exposure + Technical Ownership Are you an Embedded Software Test Engineer or Software Verification Engineer from a safety-critical or regulated environment looking to work on technology that will enable safe, certified autonomous flight? This is an excellent opportunity to join a growing specialist autonomy-assurance business, where you will help shape the verification of embedded software used across flight-critical control, runtime safety and mission-assurance systems. Founded to solve one of the biggest barriers to autonomous-system adoption the company works alongside major aerospace, defence and autonomy organisations. It is now expanding rapidly as demand grows across autonomous aviation, drones and next-generation vehicles. In this role, you will define verification strategies, develop test frameworks and conduct requirements-based verification and validation. You will also produce traceable certification evidence and apply advanced techniques including automated testing, fuzz testing, fault injection and Monte Carlo simulation. This role would suit someone with software V&V experience gained within aerospace, defence, automotive, rail, medical devices or another regulated engineering environment. Direct DO-178C, DAL A/B and aerospace experience would be beneficial but is not essential. The Role: * Define verification strategies for safety-critical embedded software and systems * Develop test frameworks, verification plans and certification evidence * Deliver requirements-based V&V, traceability and compliance documentation * Conduct integration, system and qualification testing using advanced verification techniques The Person: * Software verification and validation experience within a safety-critical or regulated environment * Experience with requirements-based testing, traceability and compliance documentation * Knowledge of embedded systems and real-time software * DO-178C, DAL A/B, formal methods or aerospace experience beneficial but not essential Hybrid working with a minimum of three days per week onsite in Witney, normally Tuesday to Thursday. Candidates must be eligable for SC Clearance. Reference Number: BBBH280345 Rise Technical Recruitment Ltd acts an employment agency for permanent roles and an employment business for temporary roles. The salary advertised is the bracket available for this position. The actual salary paid will be dependent on your level of experience, qualifications and skill set and will be decided by our client, the employer. Rise are not responsible or liable for any hiring decisions made by the end client. We are an equal opportunities company and welcome applications from all suitable candidates.
Voir cette offre
Offre premium
Freelance
CDI
CDD

Offre d'emploiData Engineer Senior IA (H/F)

Freelance.com
Publiée le
Agent IA
Large Language Model (LLM)

1 an
40k-81k €
400-660 €
Montrouge, Île-de-France
Intitulé : Data Engineer Senior IA (H/F) Expérience : +7 ans minimum Mode de travail : Hybride Localisation : Île-de-France Démarrage : ASAP Secteur : Services financiers Environnement : AWS, Spark, Python, SQL, DataOps, Gouvernance Data, CI/CD ContexteDans le cadre de l'accélération de sa stratégie Data, un grand groupe du secteur des services financiers recherche un(e) Data Engineer Senior pour rejoindre sa Direction Data & IA. Vous interviendrez au sein d'une équipe en charge de la conception, de l'industrialisation et de l'exploitation des plateformes de données destinées à soutenir les enjeux métiers, réglementaires et analytiques de l'entreprise. Votre rôle consistera à concevoir des architectures Data robustes, piloter l'industrialisation des pipelines de données et garantir la qualité, la gouvernance et la valorisation des données à grande échelle. Missions principalesPilotage des projets DataGérer un portefeuille de projets Data couvrant l'ensemble du cycle de vie de la donnée : ingestion, transformation, exposition et gouvernance. Accompagner les métiers dans l'identification et la formalisation de leurs besoins Data. Traduire les besoins fonctionnels, techniques et réglementaires en solutions concrètes et industrialisables. Être le référent technique Data auprès des chefs de projet, architectes, développeurs, data analysts, data scientists et parties prenantes métier. Piloter les choix techniques et garantir leur cohérence avec les standards de l'entreprise. Conception et développement des pipelines DataConcevoir, développer et maintenir des pipelines d'ingestion de données : Batch APIs Flux programmés Chargements de fichiers Développer des traitements ETL / ELT alimentant un Data Lake et des plateformes analytiques. Mettre en œuvre les bonnes pratiques de modélisation des données. Garantir la performance, la qualité, la résilience et la maintenabilité des traitements. Assurer l'industrialisation complète des développements réalisés. Challenger les choix techniques et méthodologiques proposés par les autres membres de l'équipe. Architecture Data et IndustrialisationConcevoir des architectures Data modernes, modulaires et évolutives. Définir et appliquer les principes DataOps : Automatisation Versionning CI/CD Reproductibilité Observabilité Favoriser la mutualisation et la réutilisation des composants existants avant tout nouveau développement. Construire et maintenir : Pipelines ETL / ELT Chaînes CI/CD APIs de diffusion de données Mécanismes de monitoring et d'alerting Collaborer avec les équipes Data, Cloud et IA afin d'harmoniser les pratiques et accélérer les déploiements. Gouvernance, qualité et conformité des donnéesDéfinir et promouvoir les standards de développement Data. Garantir la qualité, la traçabilité et la conformité des données. Structurer les pratiques autour de : Git et workflows de développement Tests automatisés Documentation Data Catalog Métadonnées Lignage des données Infrastructure as Code Réaliser des audits techniques des pipelines et jeux de données. Assurer la conformité des solutions avec les exigences réglementaires et les politiques internes de gouvernance. Garantir la reproductibilité attendue lors des contrôles et audits. Leadership technique et accompagnementEncadrer et accompagner les Data Engineers juniors et intermédiaires. Participer à la montée en compétences de l'équipe. Assurer un rôle de mentor et de référent technique. Vulgariser les enjeux Data auprès des utilisateurs métiers. Participer aux revues d'architecture et aux processus de validation technique. Contribuer à la diffusion des bonnes pratiques Data et DataOps. Innovation et veille technologiqueRéaliser une veille active sur les technologies Data, Cloud et IA. Identifier les opportunités d'amélioration des plateformes existantes. Proposer des solutions innovantes répondant aux enjeux métiers. Anticiper les évolutions réglementaires et les enjeux liés à la qualité, la gouvernance et la souveraineté des données.
Voir cette offre
Freelance

Mission freelancePGER GCP DEV N2

VISIAN
Publiée le
Python

1 an
300-500 $US
Paris, France
Dans le cadre d'un projet stratégique lié à la gestion et à la surveillance des risques, une grande organisation recherche un Data Engineer Python / Spark afin de participer à la mise en œuvre d'une solution permettant d'ingérer, d'agréger et d'exposer des données provenant de sources multiples. La solution a pour objectif de produire des reportings métiers dans le cadre de la surveillance des risques, notamment sur les problématiques liées aux risques climatiques et physiques. Au sein d'une équipe experte et engagée, vous participerez à la conception, au développement et à l'intégration de la solution sur Google Cloud Platform (GCP). Vos principales missions seront : Participer à la conception et au développement de solutions Data. Développer et intégrer des traitements en Python / Spark. Mettre en œuvre les services Data et Compute de Google Cloud Platform. Participer à l'ingestion, l'agrégation et l'exposition de données provenant de sources multiples. Contribuer à la production des données nécessaires aux reportings métiers. Participer aux phases de tests, d'intégration et de mise en production. Contribuer à l'industrialisation et à l'automatisation des traitements. Participer aux pratiques DevOps du projet. Collaborer avec les équipes techniques et métiers. Garantir la qualité et la fiabilité des développements réalisés. Le projet étant stratégique et à forte visibilité, une expertise technique solide sur l'écosystème GCP est indispensable.
Voir cette offre
Freelance

Mission freelanceData Engineer SAP AI – Confirmé/Senior

HOXTON PARTNERS
Publiée le
Agent IA

1 an
400-550 €
Paris, France
Dans le cadre d'un programme stratégique autour de l'Intelligence Artificielle, nous recherchons un Data Engineer SAP AI capable d'intervenir sur la conception, l'intégration et l'exploitation de données issues de SAP S/4HANA, afin d'alimenter des cas d'usage Data & AI à forte valeur métier. La mission nécessite une présence sur site à Paris 3 jours par semaine. Missions principalesConcevoir et développer des pipelines de données à partir de SAP S/4HANA. Extraire, transformer et intégrer les données SAP vers des plateformes Data. Participer à la mise en œuvre de cas d'usage IA / GenAI exploitant les données SAP. Garantir la qualité et la fiabilité des données. Collaborer avec les équipes métiers, Data Scientists, Data Engineers et Architectes Data. Optimiser les performances des flux de données et traitements analytiques. Préparer et mettre à disposition les données pour les modèles IA. Compétences recherchéesSAP Expertise SAP S/4HANA Bonne compréhension des données et processus métiers SAP Expérience en intégration et extraction de données SAP Data Engineering SQL avancé Python Spark ETL / ELT Data Lake / Data Warehouse APIs et traitements de données AI / Analytics Connaissance des architectures IA et GenAI Préparation des données pour les modèles IA Compréhension des enjeux RAG, LLM et gouvernance des données appréciée Cloud Azure, AWS ou GCP apprécié ModalitésType de mission : Assistance technique / Expertise Data Localisation : Paris Présence : 3 jours/semaine sur site Démarrage : ASAP Durée : à confirmer
Voir cette offre
Freelance

Mission freelance[FBO] Expert BMC Helix Discovery – Data Engineer ITAM / CMDB

ISUPPLIER
Publiée le
BMC Discovery

1 an
400-670 €
Montreuil, Île-de-France
OBJECTIF Dans le cadre du programme ITAM et la mise en place du Group Global Inventory ainsi que l'alimentation industrielle de la CMDB Group, le bénéficiaire renforce ses activités autour du produit BMC Helix Discovery. MISSION Responsable Discovery Data product : - développement des query API Discovery en regard des besoins production - construction des data sets dans l'outil de query engine - exposition du data product à la consommation opérationnelle - interfaçage au MCP pour alimenter l'IA Production - MCO et optimisation des query et data sets DevOps Discovery - Configuration et paramétrage de BMC Discovery : Configurer et paramétrer BMC Discovery pour collecter les données d'actifs informatiques, telles que les périphériques réseau, les logiciels, les matériels, etc. - Intégration des données de BMC Discovery : Intégrer les données de BMC Discovery dans le système de nettoyage des données pour enrichir les données existantes. - Définition des règles de correspondance : Définir des règles de correspondance pour associer les données de BMC Discovery avec les données existantes dans le système. - Mise en place de la synchronisation des données : Mettre en place la synchronisation des données entre BMC Discovery et le système de nettoyage des données. - Gestion des erreurs et des exceptions : Gérer les erreurs et les exceptions qui peuvent survenir lors de la collecte, de l'intégration et de la synchronisation des données. Opérationnellement, les outils de travail: - BMC Helix Discovery( Mandatory) - Starburst (Data product, MCP, AI) - Spark / Pyspark - ServiceNow ITSM (change, incident, problem, request) - Jira / confluence Nice to have: - Tableau server / Tableau Desktop / PowerBI / Dataikku - Talend Real Time Big Data / ESB, ETL, EAI - Talend Data Catalogue - PostGreSQL / Apache Kafka / S3 storage Environnement : L'expert utilisera BMC Discovery, et d'autres outils pour collecter et intégrer les données, pour ensuite les exposer en data products pour alimenter des IA.
Voir cette offre

Au service des talents IT

Free-Work est une plateforme qui s'adresse à tous les professionnels des métiers de l'informatique.

Ses contenus et son jobboard IT sont mis à disposition 100% gratuitement pour les indépendants et les salariés du secteur.

Free-workers
Ressources
A propos
Espace recruteurs
2026 © Free-Work / AGSI SAS
Suivez-nous