En quelques motsCherry Pick est à la recherche d'un Support & Data Reliability Engineer(H/F), pour le compte de l'un de ses clients qui opère dans le domaine financier. Description🚀 Contexte de la missionAu sein du département Data Technology d'un acteur majeur de la gestion d'actifs et de la finance quantitative, vous intégrez l'équipe en tant que Support & Reliability Engineer (H/F). Votre rôle sera d'assurer la gestion, la robustesse et la fiabilité maximale des systèmes et processus de données. Vous travaillerez en étroite collaboration avec les équipes de développement, les Data Engineers, les Data Scientists et les Quantitative Developers pour garantir la disponibilité, la qualité et les performances des pipelines de données critiques. 🎯 Missions principales & Rôle1. Support Data & Opérations : Assurer le support N1 sur le périmètre Data, gérer les alertes en temps réel et résoudre les incidents durant le shift de Paris. Agir en tant que Gatekeeper pour la gestion des mises en production (Data Release Management / CMRM process) et la fiabilité des données. Définir et faire appliquer les politiques de gestion des données (sauvegarde, restauration, sécurité, conformité). 2. Automation, Monitoring & Fiabilité : Maintenir des pipelines de données fiables, performants et scalables (collecte, stockage, traitement, diffusion). Mettre en place un monitoring proactif et continu pour détecter les anomalies de qualité, d'intégrité et de consistance des données. Automatiser les tâches récurrentes pour optimiser l'efficacité opérationnelle et réduire le risque d'erreur humaine. 3. Collaboration Transverse & Conduite du Changement : Collaborer avec les développeurs quantitatifs, Data Engineers et Data Scientists pour comprendre leurs besoins et résoudre les dysfonctionnements. Promouvoir les meilleures pratiques de développement axées sur la fiabilité des données. Rédiger et maintenir la documentation technique et opérationnelle. 🏁 ObjectifsGarantir la haute disponibilité et la cohérence des pipelines de données en production. Réduire le temps moyen de résolution (MTTR) des incidents Data durant le shift de Paris. Industrialiser et automatiser les processus récurrents de maintenance et de monitoring.
Data Engineer with C# Dot Net asp.net with SQL Server SSRS and Power BI Our Client is a bank based in City London who are looking to recruit at least 7 years plus experience as a Data Engineer with the ability to work with C# Dot net and SQL Server with SSRS. You must have solid expertise of at least 7 to 10 years experience of working with and developing software with C# Dot Net and MS SQL Server and SSRS – SSRS is very important for this position. Additionally, you must have sound experience of working with Power BI and Python. Must be an excellent problem solver and adept writing documentation for all projects. You ideally have worked on banking systems particularly Core Banking. Responsible for the development and delivery of new systems to automate and streamline processes required by different departments. To support the internal IT department with changes and upgrades to software platforms. To be primary contact for all technical questions relating to in-house bespoke systems and interfacing. Data Support Supporting budgeting and financial planning processes for Finance department, including loading and refreshing of data based on requirements. Understand and conduct the front-end functionality to amend and change hierarchical structures within the environment. Build data flows within the SQL environment in SSRS packages. Risk & Regulatory Maintain knowledge of all applicable regulatory requirements including the Bank's Risk and Compliance policies and procedures and adhere to these to avoid exposing the Bank to undue risk. Report policy/procedure breaches and areas of potential non-compliance and suspicions promptly upon identification in accordance with the Bank's Risk and Compliance policies. Accurately execute all controls within own area to minimise risk of policy, procedure, and/or regulatory breaches. Identify new risks/control gaps within own area and escalate accordingly to your Line Manager. Main Skills Software analysis and design. SQL Server query language with SSRS. Data warehouse design concepts, (Inmon or Kimball) Experience of developing software with C# Dot Net and asp.net and SQL Server is a must. Must have solid experience of working with SSRS and building data warehouses and reporting services. Experience of working with and developing software with Power BI and Python are essential. The Client is a Bank based in the City London. Must have a degree qualification. This is a 12 month FTC position with a salary of circa £65K - £70K. This is a hybrid position - you will be required to be in the office at least 3 days week. Do send your CV to us in Word format along with your salary and availability.
Dans le cadre d'un projet stratégique de transformation Data, nous recherchons un(e) Data Engineer. MissionsDéveloppement de modèles de données et DataMarts Construction et maintenance de pipelines ELT Orchestration des flux avec Apache Airflow Optimisation des performances et des coûts Participation aux revues de code et aux déploiements Contribution à la documentation technique Compétences indispensablesSnowflake – Expert DBT Apache Airflow SQL avancé Python Data Warehouse & DataMarts Pipelines ELT Git / CI-CD 5 ans minimum d'expérience en Data Engineering Compétences appréciéesPower BI Architecture Médaillon (Bronze / Silver / Gold) Data Fabric
Nous allons travailler sur un POC Réseau Autonome d'une durée limitée (approx 6 mois à partir de septembre), l'objectif est de collecter des données réseaux (données config Radio, Kpi, référentielles) les intégrer dans Databricks, développer des API pour requêter ces données afin que des agent IA puissent requêter les données à travers ces API. Livrables: Conception et développement de projets d'intégration de données pour des projets à forte valeur ajoutée. Développement de jobs d'intégration de données en PySpark, Spark, Python en mode streaming et batch sur la plateforme Databricks. La mise en œuvre de CI/CD (github, devops, Databricks Bundles), de l'orchestration, du data management et de la sécurité. Optimisation des jobs et des ressources cloud (GCP et Databricks). Mise en place de de Dashboard Finops afin de suivre l'usage des ressources GCP / Databricks. Travailler au sein d'équipes pluridisciplinaires : chefs de projet, architectes, devops, data engineer. Assurer une formation continue, le partage de connaissances, mise en place de documentation.
Data Engineer with C# Dot Net with SQL Server SSRS and Power BI Our Client is a bank based in City London who are looking to recruit at least 7 years plus experience as a Data Engineer with the ability to work with C# Dot net and SQL Server with SSRS. You must have solid expertise of at least 7 to 10 years experience of working with and developing software with C# Dot Net and MS SQL Server and SSRS – SSRS is very important for this position. Additionally, you must have sound experience of working with Power BI and Python. Must be an excellent problem solver and adept writing documentation for all projects. You ideally have worked on banking systems particularly Core Banking. Responsible for the development and delivery of new systems to automate and streamline processes required by different departments. To support the internal IT department with changes and upgrades to software platforms. To be primary contact for all technical questions relating to in-house bespoke systems and interfacing. Data Support Supporting budgeting and financial planning processes for Finance department, including loading and refreshing of data based on requirements. Understand and conduct the front-end functionality to amend and change hierarchical structures within the environment. Build data flows within the SQL environment in SSRS packages. Risk & Regulatory Maintain knowledge of all applicable regulatory requirements including the Bank's Risk and Compliance policies and procedures and adhere to these to avoid exposing the Bank to undue risk. Report policy/procedure breaches and areas of potential non-compliance and suspicions promptly upon identification in accordance with the Bank's Risk and Compliance policies. Accurately execute all controls within own area to minimize risk of policy, procedure, and/or regulatory breaches. Identify new risks/control gaps within own area and escalate accordingly to your Line Manager. Main Skills Software analysis and design. SQL Server query language with SSRS. Data warehouse design concepts, (Inmon or Kimball) Experience of developing software with C# Dot Net and and SQL Server is a must. Must have solid experience of working with SSRS and building data warehouses and reporting services. Experience of working with and developing software with Power BI and Python are essential. The Client is a Bank based in the City London. Must have a degree qualification. This is a 12 month FTC position with a salary of circa £65K - £70K. This is a hybrid position - you will be required to be in the office at least 3 days week. Do send your CV to us in Word format along with your salary and availability.
Chaque moment compte. Surtout ceux que vous vivez à fond. Bienvenue chez Consort Group. Consort Group accompagne depuis plus de 30 ans les entreprises dans la valorisation de leurs données et infrastructures. Elle s'appuie sur deux leaders, Consortis et Consortia, et place l'humain et la responsabilité sociétale au cœur de ses valeurs. C'est votre future équipeCréé en 2017, Consort Luxembourg accompagne localement de grands comptes internationaux ainsi que des acteurs luxembourgeois de référence. Vous rejoignez une équipe internationale dédiée aux enjeux de transformation et de technologie, avec pour objectif d'améliorer la gouvernance des projets et de développer les synergies techniques entre différentes activités. Développeur Talend / Data Integration Engineer H/FC'est votre missionVous aimez comprendre comment circulent les données, fiabiliser les échanges entre applications et aller jusqu'au code lorsqu'un flux ne fonctionne plus comme prévu ? En tant que Développeur Talend / Data Integration Engineer, vous concevez et faites évoluer les workflows d'intégration tout en contribuant à leur performance, leur fiabilité et leur intégration dans le SI. Côté build :Concevoir, développer et faire évoluer les workflows Talend ETL/ESB. Optimiser les flux et pipelines de Data Integration. Lire, interpréter et debugger le code Java généré par Talend. Définir des solutions techniques adaptées aux nouveaux besoins. Étudier leur intégration dans le paysage applicatif existant. Développer et maintenir les échanges XML et JSON. Intervenir sur les intégrations via REST et SOAP. Prendre en compte les contraintes de performance et de sécurité. Produire les conceptions techniques, dictionnaires de données et spécifications de mapping. Documenter les impacts des évolutions sur les processus métiers. Côté run :Maintenir, refactorer et optimiser les pipelines ETL existants. Garantir leur fiabilité et leurs performances. Analyser et résoudre les incidents complexes. Assurer le support et le troubleshooting autour des flux, rapports et générations documentaires. Collaborer avec les équipes techniques pour analyser les contraintes et dépendances. Participer aux analyses d'incidents, problèmes et changements. Contribuer au suivi des déploiements. Accompagner les parties prenantes techniques et métiers. Proposer des améliorations sur les applications et intégrations existantes. C'est votre parcoursVous êtes diplômé·e d'une formation supérieure en Software Engineering, informatique ou équivalent. Vous disposez d'une expérience significative en Data Integration, développement ETL ou orchestration de données, idéalement avec Talend. Vous êtes capable d'intervenir au-delà de la simple création de jobs : vous comprenez les problématiques d'intégration, savez analyser du Java généré par Talend et êtes suffisamment autonome pour diagnostiquer des problématiques complexes. Une expérience dans l'assurance ou l'industrie des fonds constitue un véritable plus. C'est votre expertiseTalend / Talend Data Fabric. ETL / ESB. SQL avancé. Java. Data Integration. Data orchestration. XML / JSON. REST / SOAP. Data Mapping. Data Dictionary. Maintenance et optimisation de pipelines. Troubleshooting. Documentation technique. Airflow, Dagster ou Kestra appréciés. Talend Administration Center (TAC) apprécié. SAP PI/PO apprécié. SmartCOMM apprécié. Connaissance des enjeux de sécurité et de protection des données au Luxembourg. C'est votre manière de faire équipeAutonomie. Esprit d'analyse. Prise d'initiative. Capacité à résoudre des problématiques complexes. Communication avec des interlocuteurs techniques et métiers. Esprit ouvert et constructif. Rigueur documentaire. Capacité à évoluer dans une équipe internationale. C'est notre engagementChez Consort Group, vous êtes un·e expert·e qu'on accompagne pour que chaque mission devienne une étape qui compte. Un onboarding attentif et humain. Une vraie proximité managériale. Des formations accessibles en continu. Des engagements concrets : inclusion, égalité, solidarité. Un package RH complet. Une culture du feedback et des projets qui font sens. C'est clairLe process de recrutement : Un premier échange téléphonique avec notre team recrutement. Un entretien RH ainsi qu'un échange métier. Un échange technique. Un dernier point avec votre futur environnement de mission. Et si on se reconnaît : on démarre ensemble. C'est bon à savoirLieu : Luxembourg Contrat : CDI Salaire indicatif : 65 K€ à 80 K€ brut annuel selon expérience Déplacements : pas de déplacements fréquents prévus Environnement : international Famille métier : Data Ce que vous ferez ici, vous ne le ferez nulle part ailleurs. Ce moment, c'est le vôtre.
Notre client dans le secteur Agroalimentaire recherche un/une Data scientist / IA Engineer H/F Description de la mission : Notre client recherche un freelance Data scientist pour compléter son équipe IA. Son rôle est de mettre en place des solutions IA dans les produits existants. Concevoir, développer et évaluer les briques d'IA et d'IA générative intégrées aux solutions (modèles, prompts, chaînes de traitement, RAG). Développer en Python les composants IA de bout en bout, de l'expérimentation jusqu'à leur intégration dans le produit. Mesurer et améliorer la performance des systèmes IA (qualité des réponses, pertinence, coûts, latence, évaluation et tests). IA agentique et orchestration Concevoir et implémenter des agents IA et leurs interactions (agent to agent), avec LangChain et LangGraph. Mettre en place et faire évoluer l'orchestrateur d'agents : routage, mémoire, appels d'outils, gestion des erreurs et supervision des workflows agentiques. Industrialiser les cas d'usage avec les Data Engineers pour un passage en production fiable et scalable. Méthodologie et expertise Apporter un savoir-faire et des idées dans la méthodologie : cadrage des cas d'usage, choix d'approche, protocoles d'évaluation, bonnes pratiques de développement IA. Challenger les besoins métiers et proposer les solutions IA les plus pertinentes (et savoir écarter l'IA quand elle n'est pas la bonne réponse). Assurer la veille technologique, documenter et diffuser les pratiques auprès des équipes de la Data Factory. Descriptif de la stack technique Python (expert) IA générative & agentique LangChain, LangGraph, orchestration d'agents, patterns agent to agent, RAG, prompt engineering Modèles & APIs LLM via APIs (Vertex AI / Gemini, OpenAI ou équivalent) Cloud & data Google Cloud Platform (GCP), BigQuery, bases vectorielles MLOps / DevOps Git, CI/CD (Jenkins), Terraform, environnement Linux Compétences / Qualités indispensables : Data Scientist / Ia Engineer, IA agentique, Agent to agent, Code en Python, IA gen Longchain, longgraph Compétences / Qualités qui seraient un + : Orchestrateur d'agent Informations concernant le télétravail : Oui — 2 jours/semaine
Nous recherchons un Data Product Engineer pour intervenir sur la conception, le développement et l'évolution de produits Data, dans un environnement basé notamment sur Talend et Starburst. MissionsConcevoir et développer des produits et flux de données répondant aux besoins des équipes Métiers et Data. Développer et maintenir des pipelines d'intégration et de transformation avec Talend. Exploiter Starburst / Trino pour l'accès, la transformation et la valorisation des données. Participer à la mise en place de solutions de Data Integration et Data Virtualization. Garantir la qualité, la fiabilité et la performance des produits Data. Optimiser les traitements et résoudre les problématiques techniques liées aux flux de données. Collaborer avec les Data Engineers, Data Architects, Product Owners et équipes Métiers. Participer aux bonnes pratiques de développement, de tests et d'industrialisation des solutions Data. Environnement techniqueTalend, Starburst / Trino, SQL, Data Integration, Data Virtualization, Data Pipelines, ETL/ELT, Data Products.
Nous recherchons un(e) data engineer capable de trouver des solutions innovantes et robustes à l'ensemble des problématiques Data. Vous aurez la charge de : • Participer à la conception et réalisation d'une solution Data depuis l'acquisition jusqu'à l'exploitation de la donnée en accompagnant la réflexion des directions métiers • Identifier, collecter et intégrer les données nécessaires à la résolution de problématiques métier et opérationnelles • Garantir la qualité des données en mettant en place les outils de mesure et de suivi adéquats en appliquant les règles de Data Gouvernance et de Data Management • Transcrire des besoins métier en règles de gestion data • Industrialiser le déploiement de vos réalisations à travers l'implémentation de tests unitaires, d'intégration et de non-régression Référence de l'offre : f21xio6jiw
🚀 Opportunité – Expert Data Engineer Azure / Databricks – Level 4 Dans le cadre de l'évolution d'une Data Platform Azure au sein d'un grand groupe, nous recherchons un(e) Data Engineer Senior / Expert Azure & Databricks. 🎯 Missions : Faire évoluer un Data Lake sur Azure Concevoir et déployer un Data Lake gouverné Intégrer et mettre en œuvre Databricks Unity Catalog Définir les modèles d'accès, de gouvernance et de partage des données Mettre à disposition les données sous forme de tables Delta / Iceberg Participer à la réalisation de POC et à l'industrialisation de la plateforme 🛠 Compétences recherchées : Azure Databricks / Unity Catalog Spark Azure DevOps GitHub Java JavaScript / TypeScript Data Lake / Data Platform Gouvernance et partage de données Delta / Iceberg 👤 Profil : Data Engineer Senior / Expert – Level 4 Forte expérience sur des plateformes Data Azure Expertise Databricks et gouvernance de données Autonomie et capacité à intervenir sur des sujets d'architecture et d'industrialisation 📍 Île-de-France – Présentiel ⏳ Mission longue
Dans le cadre d'un projet Data à fort enjeu autour du pilotage de l'activité commerciale, nous recherchons un Data Engineer expérimenté pour renforcer une équipe en charge d'un environnement DataLab. Tu interviens sur le développement, la maintenance et l'optimisation de vues de données destinées aux usages de pilotage et d'analyse. Tes missions principales : Assurer le maintien en condition opérationnelle des vues existantes Développer de nouveaux besoins Data Concevoir et maintenir des vues normalisées et optimisées Garantir la qualité et la fiabilité des données mises à disposition Participer à l'optimisation des traitements et requêtes Contribuer à la sécurisation et à la bonne exploitation des flux de données Assurer le suivi des évolutions et des corrections Participer à l'amélioration continue du DataLab
Rattaché à une équipe dédiée à la performance data, vous intervenez sur la conception, le développement et l'évolution de solutions de Business Intelligence orientées e-Retail. Vous prenez en charge l'ensemble du cycle de vie des projets data : de l'analyse des besoins métiers jusqu'au déploiement des solutions, en passant par leur développement. Grâce à votre séniorité, vous jouez un rôle clé de référent technique et de manager d'équipe. Gestion de projet & delivery :Piloter la planification, le budget et les ressources des projets data Recueillir et traduire les besoins métier en spécifications techniques et data products Superviser la conception, le développement et la maintenance des pipelines de données Garantir la livraison des dashboards et reportings (Power BI) Optimiser les processus afin d'assurer la qualité et la fiabilité des données Coordination & cohérence :Assurer la cohérence globale des projets BI via des référentiels et catalogues de données Faciliter la communication entre équipes techniques et métiers Garantir l'alignement des projets avec les enjeux business Favoriser les synergies entre les différents projets data Management d'équipe :Encadrer et accompagner une équipe de data engineers / analytics engineers Promouvoir un environnement de travail collaboratif et bienveillant Assurer le développement des compétences (coaching, formation, feedback) Développement & évolution technique :Développer des pipelines et transformations de données Construire et maintenir des rapports et dashboards Optimiser les performances des traitements et modèles de données Maintenance & support :Identifier et corriger les incidents liés aux flux data et aux reportings Garantir des délais de résolution efficaces Assurer le suivi et le reporting des incidents Lead technique :Piloter les revues de code et garantir les bonnes pratiques Être référent technique pour l'équipe Intervenir en support sur des projets critiques ou urgents Assurer la continuité opérationnelle de l'équipe data
Our government client is looking for Data Engineers to begin ASAP. Please see below for role description and details. - Hybrid, 2 days per week on site in Swansea, Wales - Inside IR35 - SC clearance required - 3-6 months initially + longer extensions expected Role details: To migrate legacy IMPALA reporting (Oracle materialised views and Discoverer workbooks) to Databricks Lakeflow Declarative Pipelines. The work involves translating existing SQL logic into a lakehouse architecture, building reconciliation checks to validate output against the legacy system, and supporting the pipelines once live. It is mostly SQL knowledge but some familiarity with Python on Databricks (in Azure) will be beneficial. Source data is already available in Databricks - you would be working with tables in Unity Catalog, not managing data ingestion or connectivity. Due to the nature and urgency of this post, candidates holding or who have held high level security clearance in the past are most welcome to apply. Please note successful applicants will be required to be security cleared prior to appointment which can take a minimum 10 weeks. LA International is an award-winning partner of choice for many of the world's most influential companies and government organisations. Holding Enhanced Government Security Accreditation, we are recognised as the European market leader in the delivery of Security Cleared talent to organisations that demand the very highest levels of security, compliance and assurance. An award-winning organisation, having secured the prestigious Queens Award for Enterprise: International Trade over multiple years. We are committed to fostering an inclusive, equitable and accessible workplace where everyone feels valued and supported. We welcome applications from all individuals, regardless of background or identity, and we encourage candidates who may not meet every listed requirement to still apply. If you require any adjustments or support during the recruitment process, please let us know and we will work with you to ensure a fair and accessible experience. Please Note: If a high volume of applications is received, only candidates shortlisted will be contacted.
Bonjour, Notre client basé dans le Sud de l'IDF est à la recherche d'un Devops / Data Engineer expérimenté pour intervenir dans le cadre d'un programme stratégique de mise en œuvre d'une Nouvelle Plateforme Digitale, avec un nouveau site ecommerce, de nouveaux flux, de nouveaux ETL, de nouvelles pipelines. Démarrage : ASAP Télétravail : 2 jours par semaine maximum Missions principales Grâce à sa compréhension du Système d'information (SAP, PIM, DAM, PSP, RCU, ERP …) et sa capacité à discuter avec les métiers, les architectes et les Engineer Squad Lead, il conçoit, implémente, planifie les ETL, Flux, pipelines à implémenter afin de répondre aux enjeux business. Il fait de même sur les pipelines qui permettent aux squads de déployer sereinement et en autonomie. Objectifs de l'équipe : Gestion d'ETL et de flux de bout en bout depuis la prise du besoin jusqu'à la maintenance, l'évolution et le maintien en conditions opérationnelles Qualification et intégration CI/CD : Intégration du déploiement des Tests unitaires et fonctionnels Intégration des outils de qualité type SonarQube, SAST, autres Gitlab / AWS Pipeline Monitoring & Observabilté : Création de dashboards, ouverture automatique de tickets… Implémentation et configuration des outils groupes Datadog & New Relic Étude, préparation et budgétisation de l'utilisation des infrastructures et services cloud AWS et Azure Automatisation des tâches via scripting Apport d'un support technique aux équipes transverses (développeurs, QA, production, autres équipes) Debug, résolution d'incidents et optimisation Cloud (AWS) Création, maintien, amélioration et documentation des pipelines de déploiement automatique CI/CD. N'hésitez pas à m'envoyer votre candidature. Vanessa | DUONEXT
