Trouvez votre prochaine offre d’emploi ou de mission freelance Big Data

🏭 Secteurs stratégiques : Banque d'investissement 🗓 Démarrage : ASAP PAS DE FULL REMOTE NI SOUS TRAITANCE MERCI 💡Objectif global : Expert kafka 💡Description détaillée Le contexte de la mission : Dans le cadre de l'équipe Data Analytic , nous créons et maintenons des architectures Big Data pour les besoins internes de l'entreprise. Pour renforcer notre équipe support, nous proposons une mission de DATA ENGINEERING sur KAFKA 💡Responsabilités principales : Mise en œuvre son expertise sur Kafka Support, automatisation et maintien en conditions opérationnelles des plateformes Kafka Participation aux développement de l'équipe data Analytics et projet Topic As a Service Support plateforme WWW 💡Compétences communication Environnement anglophone

Au sein d'une équipe en charge des plateformes Data & IA, intervenir sur l'administration, l'évolution et la modernisation de plateformes de recherche et d'indexation distribuées utilisées dans un contexte international. L'objectif principal est de piloter la migration de plusieurs dizaines de clusters vers des versions et architectures plus récentes, tout en garantissant la disponibilité, la performance et la résilience des services. Principales missions Participer aux projets de migration de clusters vers des solutions de nouvelle génération. Finaliser les migrations techniques en cours. Mettre en œuvre les mécanismes de sauvegarde et de restauration sur stockage objet. Déployer et administrer les politiques de gestion du cycle de vie des données. Analyser et corriger les anomalies de fonctionnement des plateformes. Réaliser des études de capacité et optimiser le dimensionnement des infrastructures. Automatiser la collecte et le reporting des indicateurs d'usage. Produire et maintenir la documentation technique. Participer à l'amélioration continue des plateformes et des processus d'exploitation. Environnement technique Moteurs de recherche distribués : OpenSearch, Elasticsearch. Cloud public : AWS, GCP. Infrastructure as Code : Terraform. Conteneurisation et orchestration : Kubernetes. CI/CD et GitOps : GitLab, ArgoCD. Scripting et automatisation : Python. Systèmes : Linux. Méthodologies : Agile, ITIL. Solide expertise OpenSearch et/ou Elasticsearch. Bonne maîtrise des environnements Linux et Kubernetes. Expérience des infrastructures Cloud et de l'automatisation via Terraform. Bonne connaissance des chaînes CI/CD et des pratiques GitOps. Capacité à intervenir sur des sujets d'architecture, d'exploitation et de migration. Anglais professionnel requis.

Je recherche un Data Analyste avec des connaissances de Capacity Management Définition Un Data Analyst Capacity Management est un professionnel qui utilise l'analyse de données pour optimiser la gestion des capacités (capacity management) d'une organisation, généralement dans un contexte IT/infrastructure, mais le concept peut aussi s'appliquer à d'autres domaines (production, logistique, cloud, etc.). Capacity Management = discipline visant à garantir que les ressources (serveurs, réseau, stockage, effectifs, machines...) sont dimensionnées de façon à répondre à la demande actuelle et future, ni en sur-capacité (coûts inutiles) ni en sous-capacité (risque de dégradation de service). Contexte : Les volumes d'Unité d'œuvre technique et les volumes de consommation de la DMZR Cloud traduisent la consommation en ressources tant sur la commande de puissance que sur les services d'exploitation. Les résultats produits permettent d'alimenter la stratégie globale de l'entreprise, sur le plan opérationnel et financier. Dans le cadre de ses activités, le Data Analyst Volume Technique et DMZR devra assister la maîtrise d'ouvrage dans la mise en œuvre de nouvelles applications suivant une démarche agile. Ce poste à forte visibilité permet de faire la liaison entre différents interlocuteurs, comme les équipes techniques, les représentants des métiers, la direction des systèmes d'information et la finance. Un exercice trimestriel de collecte des volumes prévisionnelles de consommation vient compléter l'activité de l'équipe. L'équipe est également en charge de la mise en œuvre d'outils de Dataviz pour rendre compte de la consommation des volumes. MISSION Dans le cadre d'une nouvelle mission mon client bancaire recherche un Data Analyste avec des connaissances de Capacity Management technique. Vous avez pour mission d'assurer la collecte et la consolidation de toutes les mesures techniques, faites par les équipes de métrologie ou les équipes techniques, en vue de produire les Unités d'Œuvres Techniques (UOT) mensuelles des différents contrats. Vous assurez la collecte des volumes de consommation de la DMZR Vous participez à l'évolution des catalogues des services pour les nouveaux produits et services. Vous suivez et contrôlez la cohérence des indicateurs et des volumes qui seront présentés au Management et qui seront ensuite publiés pour la facturation client. Vous engagez les actions nécessaires pour adapter les outils de mesure et de collecte face aux évolutions technologiques et pour avoir une exhaustivité du parc. Avoir la maîtrise des règles de production des volumes et garantir les délais de livraison. Assurer l'analyse et les explications des variations mensuelles pour réconcilier les demandes des métiers et les ordres de travaux. Vous aurez la charge de la présentation des éléments de facturation pour un portefeuille de clients. Fort de votre connaissance des éléments de facturation vous aurez la charge de proposer des outils d'aide à la décision pour anticiper sur les besoins des clients et pour prévois les besoins en investissements Périmètre actuel de plus de100 métiers et de 115 métriques techniques MOA/Application Owner d'un outil de consolidation des datas Adaptation permanente en lien avec le dynamisme des évolutions du catalogue de services IT. Implémentation de modèles prédictifs de prévision des consommations."

Notre client dans le secteur Énergie et ressources naturelles recherche un/une Market Expert & Data Analyst (Future Energy Scenarios) H/F Description de la mission : Service description – Market Expert & Data Analyst (Future Energy Scenarios) Context and objective of the assignment A major Belgian player in the energy sector is looking for one consultant to support its Scenarios, Market & Adequacy analysis team. The assignment takes place in the context of the Belgian and European energy transition and focuses on future energy scenarios, adequacy studies, security of supply studies, vision studies and cost-benefit analysis related to future grid projects. These studies rely on economic dispatch tools used to evaluate the need for additional generation capacity, economic outputs and system margins for every hour of the year. The consultant will contribute to building future energy scenarios and modelling frameworks, as well as the related data infrastructure and analysis capabilities. Main responsibilities • Support the team in building future energy scenarios for Belgium and Europe • Work on trajectories for future electricity demand, including EV, heat pumps and industry projections • Work on supply-side trajectories, including thermal generation and renewable energy sources • Collect, consolidate and challenge large volumes of data from different countries, sources and tools • Use and improve data management processes within the team • Contribute to and improve data collection processes, scenario definitions and model-building datasets • Support model building and perform quality checks on built models • Support impact assessments on modelling assumptions, including demand, renewables, flexibility and storage assumptions • Perform quality checks on models and simulation results • Consolidate historical data into model input datasets • Collect projection scenarios from European countries and verify alignment with defined storylines • Create, review and improve tools in R, Python, VBA and Excel to modify parameters or data items in the modelling and simulation environment • Create and improve visualizations of simulation outputs using tools such as R, Power BI and QGIS • Critically analyze algorithm results and help identify key trends • Support data engineering activities and interfaces between tools • Contribute to additional tasks related to future scenarios and modelling as needed Profile sought The client is looking for a medior consultant with strong interest and knowledge in the energy sector, especially electricity markets in Belgium and Europe, including major policies and targets. The person should be proactive, analytical, innovative, able to challenge projections and assumptions, and comfortable working both independently and within a team. Required skills • Proficiency in R or Python is mandatory • Strong Excel skills are mandatory • Knowledge of data analysis, data mining, data gathering and data processing • Knowledge of energy systems scenarios and strong interest in the energy transition • Ability to support simulation analysis and modelling activities • Fluent Dutch and/or French, and English required • Minimum 3 years of experience Additional appreciated skills • Experience with both R and Python • VBA knowledge • Knowledge of ANTARES or other economic dispatch / market simulation tools • Experience with market simulations • Data visualization using Power BI or QGIS Personal qualities • Passion for the energy transition • Interest in delivering high-quality tools to improve team effectiveness • Willingness to invest in a medium-term team environment and grow expertise • Critical mindset able to question scenario data and challenge projections Work organization • One consultant requested • Full-time assignment • Physical presence on site required 3 days per week • Location in Brussels, with exact site potentially varying and communicated at least one week in advance • For non-EU candidates, a valid Belgian work permit and residence permit are required Benefits / attractiveness of the mission • Opportunity to work on a high-impact project in the energy sector • Exposure to innovation and collaboration in the context of the energy transition • Opportunity to contribute to advanced tools and studies supporting future energy infrastructure planning • Positive work culture with focus on well-being • Diverse and passionate team environment Compétences / Qualités indispensables : Energy market analysis, Future energy scenarios, Python or R, Data analysis and modelling, Excel, English with Dutch and/or French Compétences / Qualités qui seraient un + : VBA, ANTARES, experience with both R and Python, market simulations, Power BI, QGISInformations concernant le télétravail : Oui — 2 jours/semaine

Role: A practical, operationally credible Data Architect - not someone who simply produces architecture slides - who can sit with targeteers, intelligence staff, mission planners and Digital Warfighters, understand where information slows down real operations, and turn that into usable data models, standards and integration patterns for our Maritime DTW efforts. Their job is to identify the key data frictions and opportunities in a live and priority mission thread - what data is needed/available, where it sits, who owns it, why it is hard to trust/ share/exploit, and what needs to change - and deliver some short term changes that help us decisions faster and with more confidence, and identify opportunities/requirements for automation and/AI: a common targeting data model, a clear map of systems and information flows, agreed data owners and standards, that is informed by and shapes the technical architecture - both MAB, MFW and DTW. Due to the nature and urgency of this post, candidates holding or who have held high level security clearance in the past are most welcome to apply. Please note successful applicants will be required to be security cleared prior to appointment which can take a minimum 18 weeks. LA International is an award-winning partner of choice for many of the world's most influential companies and government organisations. Holding Enhanced Government Security Accreditation, we are recognised as the European market leader in the delivery of Security Cleared talent to organisations that demand the very highest levels of security, compliance and assurance. An award-winning organisation, having secured the prestigious Queens Award for Enterprise: International Trade over multiple years. We are committed to fostering an inclusive, equitable and accessible workplace where everyone feels valued and supported. We welcome applications from all individuals, regardless of background or identity, and we encourage candidates who may not meet every listed requirement to still apply. If you require any adjustments or support during the recruitment process, please let us know and we will work with you to ensure a fair and accessible experience. Please Note: If a high volume of applications is received, only candidates shortlisted will be contacted.

Data Architect Must have an Active SC Clearance You will work with large-scale data environments, applying innovative approaches to improve data quality, establish trusted master records, and enable AI-driven data matching. The position is ideal for an experienced Data Architect with deep expertise in Entity Resolution, Master Data Management, and large-scale data integration who can deliver high-quality solutions that exceed customer expectations. Data Architect Responsibilities Lead the design and implementation of enterprise Entity Resolution solutions across multiple data sources. Design scalable Master Data Management (MDM) architectures and Golden Record models. Develop record linkage, matching, deduplication, clustering, and survivorship strategies. Define entity hierarchies, data standards, and data governance processes. Monitor and improve matching accuracy, precision, recall, and platform scalability. Support AI and Machine Learning approaches to improve entity matching and data quality. Collaborate with technical and business stakeholders to deliver high-quality data solutions. Produce architecture documentation and ensure delivery against agreed programme milestones. Data Architect Skills and Experience Proven experience as a Data Architect delivering large-scale data solutions. Strong expertise in Entity Resolution and Master Data Management (MDM). Experience designing Golden Record models, entity hierarchies, and data governance frameworks. Strong knowledge of record linkage, deduplication, clustering, and matching algorithms. Experience implementing survivorship rules, standardisation, and data merging strategies. Experience working with AI and Machine Learning techniques for entity matching is highly desirable. Strong understanding of enterprise data architecture, data quality, and large-scale data integration. Excellent stakeholder engagement, communication, and analytical skills. Experience delivering fixed-scope projects to challenging timescales. To apply, please send your CV by pressing the apply button. Due to high volume of applications, only shortlisted CVs will be contacted. Due to the nature and urgency of this post, candidates holding or who have held high level security clearance in the past are most welcome to apply. Please note successful applicants will be required to be security cleared prior to appointment which can take a minimum 10 weeks. LA International is an award-winning partner of choice for many of the world's most influential companies and government organisations. Holding Enhanced Government Security Accreditation, we are recognised as the European market leader in the delivery of Security Cleared talent to organisations that demand the very highest levels of security, compliance and assurance. An award-winning organisation, having secured the prestigious Queens Award for Enterprise: International Trade over multiple years. We are committed to fostering an inclusive, equitable and accessible workplace where everyone feels valued and supported. We welcome applications from all individuals, regardless of background or identity, and we encourage candidates who may not meet every listed requirement to still apply. If you require any adjustments or support during the recruitment process, please let us know and we will work with you to ensure a fair and accessible experience. Please Note: If a high volume of applications is received, only candidates shortlisted will be contacted.

ContexteDans le cadre du renforcement de son équipe Data & IA, notre client recherche un Data Engineer / Administrateur Plateforme Data pour assurer l'administration, l'exploitation et l'évolution des infrastructures Data basées sur Cloudera CDP et les technologies Open Source. Vous interviendrez sur des plateformes critiques en collaboration avec les équipes applicatives, infrastructures, métiers et internationales afin de garantir la disponibilité, les performances et l'évolution des environnements Data. MissionsAdministration & ExploitationAdministrer et maintenir les plateformes Data Cloudera CDP. Garantir le maintien en condition opérationnelle des infrastructures. Superviser les plateformes et assurer le traitement des incidents. Participer aux astreintes et aux interventions hors horaires ouvrés. Optimiser les performances et la capacité des plateformes. Data EngineeringConcevoir les solutions d'ingestion de données (API). Mettre en œuvre des architectures de stockage (Hadoop, Ozone, Druid, ClickHouse...). Développer et automatiser les traitements de données. Mettre en place les tests unitaires et d'intégration. Industrialiser les traitements de nettoyage et de transformation des données. Évolution des plateformesParticiper aux migrations des clusters Hadoop Cloudera. Contribuer au déploiement des nouvelles plateformes Cloudera Data Services sous OpenShift/Kubernetes. Être force de proposition sur les évolutions techniques. Participer au design des infrastructures Data. Support & ExpertiseRésoudre les incidents complexes (Hive, Spark, Yarn...). Accompagner les équipes applicatives et métiers. Assurer un support technique de haut niveau. Participer à la documentation et au partage de connaissances. Environnement techniqueImpératifCloudera CDP 7.1.x RedHat Enterprise Linux 8 & 9 Python Java Ansible DevOps Très bonnes connaissancesHadoop Hive HBase Kafka Spark Solr Knox Ranger ZooKeeper Kerberos LDAP AppréciéesOpenShift Kubernetes Trino / Starburst Airflow Flink Maven Gradle ClickHouse Ozone Druid Profil recherchéFormation Bac+5 en informatique ou équivalent. Expérience significative sur des plateformes Big Data Cloudera. Expertise Linux RedHat. Bonne maîtrise des environnements Open Source Data. Solides compétences en automatisation (Ansible). Connaissances DevOps. Capacité à analyser et résoudre des incidents complexes. Esprit d'équipe, autonomie et bonnes capacités de communication. ConditionsCouverture de l'équipe : 8h00 – 19h00 Astreintes et interventions hors horaires ouvrés selon un planning de rotation. Niveau attendu : Confirmé / Senior (N4). Compétences clés : Cloudera CDP 7.1.x, RedHat 8/9, Hadoop, Spark, Hive, Kafka, Python, Java, Ansible, DevOps, OpenShift, Kubernetes.

Merci de contacter Sumi Delplanque directement. Vous allez me trouver facilement sur google. Rattaché.e au département Data OR & AI de notre client, au sein de l'équipe Finance, votre mission consistera principalement à concevoir, développer et déployer des applications de Machine Learning et d'IA Générative au service des métiers des achats client. Objectifs principaux : Cas d'usage variés, allant des applications prédictives (classification, aide à la décision, etc.), Traitement intelligent de documents (OCR, parsing, extraction d'informations), Phases de cadrage et de prototypage (POC) Industrialisation des solutions IA. Compétences techniques : Maitrise du python Compréhension d'un environnement cloud (GCP) > MANDATORY Maitrise des techniques de Machine Learning (notamment modélisation mathématiques/statistiques) et aussi d'IA générative (LLM, RAG, Pipelines de Parsing ..) Détails subsidiaires : Equipe de 4 personnes Autre : Localisation : Roissy Charles de Gaulle Télétravail : 3 jours / semaine Date de commencement : 01 septembre 2026 Durée de la mission : 12 mois Déplacements : Possible à Amsterdam ou Toulouse, tous les 6 mois environ. Anglais : travail au quotidien, réunions, documentation écrite, etc.

Pour l'un de nos clients, nous recherchons un(e) Ingénieur DATA BI & Cloud Azure pour renforcer leurs équipes IT. Votre poste et vos missions Membre de l'équipe IT & Digital, vous intervenez au cœur des différents projets de développement du Groupe sur un périmètre international. Dans le respect de la stratégie IT établie par le DSI, votre mission consiste à : Mise en place d'une vraie démarche data-driven au niveau technique - Apporter votre expertise technique et vos idées lors de la mise en place de projets concernant les développement données / BI - Force de proposition sur des nouvelles architectures et solutions d'intégration des données - Connaissances des principes big data et IoT - Connaissances avancées en datawarehouse et modèles de gouvernance des données - Connaissances des API Data pour le temps réel

La mission consiste à : - Exposer les données utiles à l'entreprise pour les analyser et les utiliser afin d'améliorer l'expérience utilisateur et la productivité - Transformer des données issues du DataLake afin de les normaliser - Modéliser la sphère de données - Développer les flux - Exposer des données brutes et/ou agrégées au bon niveau de granularité aux différents métiers de l'entreprise - Travailler en lien avec des Data Scientists sur les données qu'il aura exposées - Mettre en place des rapports de Dataviz - Mission basée en métropole lilloise avec présence sur site 3j/semaine obligatoire Compétences demandées : - Formation supérieure en école d'ingénieur, école d'informatique ou Master spécialisé dans la Data Science - Première expérience en Data Engineering indispensable - Snowflake, GCP, BigQuery, DBT, SQL, Semarchy, Airflow, Python ... - Excellents savoir-être : rigueur, esprit analytique et de synthèse, communication... - Méthode Agile - Anglais

Au sein de l'entité Data de la Fabrique Digitale, vous intervenez sur les projets transverses de l'entreprise autour des solutions de BI, Big Data, Data Analytics, DataViz et Data Science. La plateforme Data couvre notamment des référentiels de données, des datawarehouses métiers, un datalake, des solutions de simulation et de prévision, des algorithmes de prédiction ainsi que des solutions de restitution Self BI et de services managés. Mission : Accompagner les squads projets dès la phase de cadrage jusqu'à la mise en production. Apporter une expertise plateforme et architecture aux équipes projets. Participer aux cérémonies Agile et représenter la plateforme Data lors des instances clés (Go/NoGo, comités stratégiques, etc.). Définir et contribuer à la stratégie de sauvegarde, de PRA/PCA et aux mécanismes de restauration des services. Accompagner les Tech Leads dans les choix d'architecture et la rédaction des dossiers d'architecture technique (DAT). Contribuer à l'amélioration continue des briques socles de la plateforme. Identifier les risques techniques et proposer les plans d'actions associés. Superviser les interventions des experts Data Engineering, Data Management, DataViz et Machine Learning. L'environnement technique repose principalement sur : AWS (Cloud Public) Databricks Power BI GitLab CI/CD Jira et Confluence Livrables attendus Documents de cadrage et d'architecture (DAT, DEX, contrats d'interface, CCD). Études techniques, PoC et recommandations d'architecture. Analyses de risques et audits de faisabilité. Macro-estimations budgétaires et offres de solutions techniques. Procédures d'exploitation, de maintenance et de reprise d'activité.

En tant que Data Engineer (F/H), vous jouez un rôle central dans la construction, la maintenance et l'optimisation de l'architecture data de l'entreprise. Vos principales responsabilités : Concevoir des pipelines ETL pour le traitement de données. Optimiser les bases de données et les flux de données. Faire transiter et intégrer les données dans le Cloud (AWS, Azure, GCP). Gérer la qualité et la sécurité des données (gouvernance). Collaboration avec les équipes transverses : Participer aux projets en interagissant avec les experts métiers, les architectes techniques et les chefs de projet. Stack technique : Solide expérience en conception et développement de pipelines ETL/ELT. Maîtrise de langages tels que Python, SQL, Spark… Bonne connaissance des environnements cloud (AWS, Azure ou GCP) et services associés (ex : Glue, BigQuery, Data Factory…). Maîtrise d'outils de traitement de données distribuées (Spark, Databricks, etc.). Connaissance des bases de données relationnelles et NoSQL (PostgreSQL, MongoDB…). Pratique des outils de versioning (Git) et d'intégration continue (CI/CD). Compréhension des problématiques de sécurité, de qualité et de gouvernance des données.

Fed IT, cabinet entièrement dédié aux recrutements spécialisés sur les métiers de l'informatique (Infra, Data, Développement, MOA, MOE, Management), recherche pour un de ses clients spécialisé dans le secteur de l'assurance retraite, un ou une : Data Ingénieur (H/F). Le poste est à pourvoir dans le cadre d'un CDI chez le client final. Au sein d'une DSI de 5 personnes, vous aurez la charge de l'intégralité du périmètre Data (tant coté ingénierie en amont que coté reporting en aval), en garantissant la disponibilité, la performance, et la stabilité des solutions en place. Vous serez également susceptible de travailler sur d'autres sujets (développement d'applications internes). A ce titre, vos principales missions seront : - MCO des reporting en place et des solutions Data déployées ; - Recueil des besoins auprès des utilisateurs ; - Rédaction des spécification fonctionnelles et techniques ; - Gérer les flux de données (ETL) & assurer le bon fonctionnement et leur évolution ; - Créer et maintenir les bases de données SQL (modélisation, optimisation, requêtes) ; - Garantir la qualité des données et intégrer la sécurité dans les développements ; - Concevoir et maintenir les rapports et tableaux de bord Business Objects (BO) et Power BI à destination des directions métier ; - Gérer et maintenir la cartographie du SI et des interconnexions avec les tiers…

Data Engineer | DBT / Qlik Sense / BigQuery | Paris | FreelanceJe recherche un Data Engineer senior pour renforcer une équipe Data intervenant sur une plateforme GCP, avec BigQuery comme socle décisionnel. Le cœur de la mission est le développement DBT et le développement Qlik Sense. Nous recherchons un profil capable de concevoir des modèles de données performants et de développer des restitutions de qualité dans un environnement Cloud moderne. Informations mission• Localisation : Paris • Présence : 2 jours sur site / 3 jours en télétravail • Démarrage : ASAP • Durée : 12 mois renouvelables • Contrat : Freelance • TJM : 450 à 500 € Votre rôle• Développer et maintenir des modèles de données avec DBT • Développer et faire évoluer les applications et dashboards Qlik Sense • Concevoir et optimiser des requêtes SQL complexes sur BigQuery • Participer à la modélisation des données et à l'optimisation des performances • Industrialiser les développements et contribuer aux bonnes pratiques Data • Collaborer avec les équipes métiers et techniques dans un environnement Agile Environnement techniqueObligatoire : SQL (expert) DBT BigQuery Qlik Sense GCP Un plus : Python Airflow Looker Hive GitLab / GitKraken Jenkins / CI/CD Profil recherché• 5 ans d'expérience minimum en Data Engineering • Excellente maîtrise de DBT, BigQuery et Qlik Sense • Très forte expertise SQL orientée Data Warehouse et décisionnel • Bonne connaissance des environnements Cloud GCP • Capacité à intervenir en autonomie sur les développements et les optimisations • Esprit d'équipe, rigueur et sens de la qualité Vous êtes à l'aise dans un environnement GCP et recherchez une mission longue avec une forte composante DBT et Qlik Sense ? N'hésitez pas à me contacter. 📩 #DataEngineer #DBT #QlikSense #BigQuery #GCP #SQL #DataEngineering #Freelance #Paris