Dans le cadre de projets à forte volumétrie autour des domaines Risque, Finance et Reporting réglementaire, chez l'un de nos clients grands comptes, nous recherchons un Big Data Engineer confirmé pour intervenir sur la conception, le développement et l'industrialisation de traitements de données à grande échelle. Vous aurez pour mission missions La conception et le développement de pipelines de données batch. L'alimentation de datamarts réglementaires Risque et Finance. L'alimentation des systèmes de reporting financiers et risques. L'intégration de données issues de sources variées : Core Banking, bases relationnelles, fichiers partenaires, systèmes internes, etc. La mise en place de contrôles de qualité, cohérence et complétude des données. L'optimisation des traitements sur de fortes volumétries : partitionnement, gestion des ressources, performances Spark, optimisation des requêtes. L'industrialisation et le déploiement des traitements via CI/CD, orchestration et monitoring. La réalisation des tests unitaires et des TNR. La documentation technique et la mise à jour des référentiels de données. La prise en compte des contraintes de sécurité, confidentialité et conformité réglementaire : RGPD, classification, anonymisation des données. La participation aux cérémonies Agile et aux réunions projets. La contribution aux activités de Run quotidien et mensuel. Environnement technique Scala – Spark – Hadoop – HDFS – Hive – Airflow – SQL avancé – Bases relationnelles – NoSQL – CI/CD – DevOps Une très bonne maîtrise des problématiques Big Data, volumétrie et optimisation des performances est indispensable.
Vos attentes * Rejoindre une entreprise à impact pour créer un meilleur demain en prenant soin de l'économie, de l'humain et de la planète ? * Entrer dans une société française qui maitrise son destin * Intégrer une équipe à taille humaine ? * Vous aimez l'autonomie, la création, la prise d'initiative, l'esprit d'équipe ? Mission Dans le cadre du renforcement de son équipe OPS Data / IA, notre client recherche un Expert Technique OPS / SRE spécialisé en infrastructure, production et environnements Data & IA. Vous interviendrez au sein d'un environnement technique riche et à forts enjeux, avec pour objectif de garantir l'intégration, l'exploitabilité, la disponibilité et la pérennité des solutions Data et IA au sein du SI. Nous recherchons avant tout un profil orienté infrastructure et production, disposant d'une solide expertise Linux/Unix et d'une expérience significative des environnements Big Data. ## ? Vos missions Vous serez notamment amené à : * Garantir l'intégration et l'exploitabilité des solutions Data & IA dans le SI. * Apporter votre expertise technique aux projets Data/IA. * Participer au choix et à la mise en œuvre des solutions techniques. * Veiller au respect des contraintes d'architecture, de sécurité et d'exploitation. * Assurer le maintien en conditions opérationnelles et la pérennité des plateformes. * Faire évoluer les solutions afin de maintenir leur niveau de performance et de sécurité. * Mettre en place et garantir les moyens de mesure et de suivi de la qualité de service. * Assurer le support et l'expertise N2 auprès des équipes de production. * Contribuer aux démarches Agile et DevOps. ## ?️ Environnement technique ### Systèmes & Production * Linux / Unix – indispensable * Administration N2 en environnement de production * Expérience significative en exploitation et production ### Big Data / Data Platform * Cloudera / Cloudera CDP * Hadoop * Kafka * Talend * Solr * HBase * Hive * Spark * Kudu * Impala * Starburst Une expérience dans l'installation et l'administration autonome de clusters Cloudera, Kafka et/ou Talend est particulièrement recherchée. ### Cloud & Data * Azure * Azure Databricks * Azure Data Factory * Azure Monitor * Azure Backup * Azure Log Analytics ### Infrastructure as Code * Terraform ### Sécurité & Authentification * Kerberos * Vault * Apache Knox * IDM * Active Directory ### Bases de données * PostgreSQL * MariaDB * MongoDB * Exacc Bonus : * ELK / Kibana
Data Scientist – Manchester Our Client an international organisation is looking to recruit a Data Scientist with 7 to 10 years expertise as a Data Scientist. You will have Natural Language Processing (NLP) knowledge and experience and understand and analyse large data sets to discover new insights. Working in a multi-disciplinary team within a highly technical and complex environment. Well versed in scalable data mining and machine learning techniques (using computers to improve as well as develop algorithms)Kernel Methods, Deep Learning, Statistical Relational Learning, Ensemble Methods Model using advanced statistical/ mathematical models, predict and segment data to hypothesize/ evolve uses cases to monetize data and generate other business value. Translate business needs to technical requirements and implementation. Experience of Big Data technologies/Big Data Analytics. C++, Java, Python, Shell Script R, Matlab, SAS Enterprise Miner Elastic search and understanding of Hadoop ecosystem Experience working with large data sets, experience working with distributed computing tools like Map/Reduce, Hadoop, Hive, Pig etc. Advanced use of Excel spread sheets for analytical purposes MSc or PhD in Data Science or an analytical subject (Physics, Mathematics, Computing) or other quantitative discipline The position is based close to Manchester. The salary for this position will be circa £75K - £85K plus benefits. Please send your CV to us in Word format along with salary and availability details.
🚀 Nous recrutons | Développeur C# / SQL – Optimisation des performances 🏦 Secteur Banque – Finance de marché 🔄 Mode hybride ⏳ Mission longue durée Pour le compte d'un grand groupe bancaire, nous recherchons un(e) Développeur(se) C# / SQL confirmé(e) pour intervenir sur une application critique manipulant d'importants volumes de données financières. L'objectif principal de la mission sera d'analyser et d'optimiser les traitements afin de réduire significativement les temps d'exécution des batchs. 🎯 Vos missions • Analyser et optimiser des traitements batch en C# et SQL Oracle • Revoir les algorithmes et requêtes afin d'améliorer leurs performances • Identifier les points de ralentissement et proposer des solutions durables • Concevoir et développer les évolutions techniques • Rédiger les éléments techniques des user stories • Automatiser et réaliser les tests, notamment les tests d'intégration • Participer au support, à la maintenance et à la documentation de l'application • Collaborer avec les équipes métier, risques et IT 🛠️ Environnement technique C# • SQL • Oracle • Control-M Des connaissances sur les technologies suivantes constituent un plus : Hadoop • Spark • Scala • Python • Hive • Kafka • Angular • NestJS 👤 Profil recherché • Entre 6 et 9 ans d'expérience en développement • Solide expertise en C# et SQL Oracle • Expérience indispensable en optimisation des performances et traitement de volumes importants • Bonne compréhension des traitements batch • Autonomie, capacité d'analyse et force de proposition • Une connaissance de la finance de marché, des instruments financiers, des sensibilités ou de la XVA serait appréciée
Big Data Scientist - Expert – Manchester Our Client an international organisation is looking to recruit a Big Data Expert with 7 to 10 years expertise as a Big Data Scientist. You will have Natural Language Processing (NLP) knowledge and experience and understand and analyse large data sets to discover new insights. Working in a multi-disciplinary team within a highly technical and complex environment. Well versed in scalable data mining and machine learning techniques (using computers to improve as well as develop algorithms)Kernel Methods, Deep Learning, Statistical Relational Learning, Ensemble Methods Model using advanced statistical/ mathematical models, predict and segment data to hypothesize/ evolve uses cases to monetize data and generate other business value. Translate business needs to technical requirements and implementation. Experience of Big Data technologies/Big Data Analytics. C++, Java, Python, Shell Script R, Matlab, SAS Enterprise Miner Elastic search and understanding of Hadoop ecosystem Experience working with large data sets, experience working with distributed computing tools like Map/Reduce, Hadoop, Hive, Pig etc. Advanced use of Excel spread sheets for analytical purposes An MSc or PhD in Data Science or an analytical subject (Physics, Mathematics, Computing) or other quantitative discipline would be handy. The position is based close to Manchester. The salary for this Big Data Scientist position will be circa £75K - £85K plus benefits. Please send your CV to us in Word format along with salary and availability details.
Big Data Scientist – Docklands London Our Client an international organisation is looking to recruit a Big Data Expert with 2 to 5 years expertise as a Big Data Scientist. You will have Natural Language Processing (NLP) knowledge and experience and understand and analyse large data sets to discover new insights. Working in a multi-disciplinary team within a highly technical and complex environment. Well versed in scalable data mining and machine learning techniques (using computers to improve as well as develop algorithms)Kernel Methods, Deep Learning, Statistical Relational Learning, Ensemble Methods Model using advanced statistical/ mathematical models, predict and segment data to hypothesize/ evolve uses cases to monetize data and generate other business value. Translate business needs to technical requirements and implementation. Experience of Big Data technologies/Big Data Analytics. C++, Java, Python, Shell Script R, Matlab, SAS Enterprise Miner Elastic search and understanding of Hadoop ecosystem Experience working with large data sets, experience working with distributed computing tools like Map/Reduce, Hadoop, Hive, Pig etc. Advanced use of Excel spread sheets for analytical purposes An MSc or PhD in Data Science or an analytical subject (Physics, Mathematics, Computing) or other quantitative discipline would be handy. The position is based in the Docklands London. This is a 3 to 6 month contract assignment. Please send your CV to us in Word format along with daily rate and availability details.
Le contexteDans le cadre du maintien en conditions opérationnelles et de l'évolution d'un environnement Big Data / Datalake décisionnel, nous recherchons un(e) Ingénieur Data Spark/Scala – Gestion courante afin d'accompagner l'un de nos clients sur des enjeux de suivi d'exploitation, correction d'incidents et évolution de traitements Data. Quelques éléments pour mieux comprendre l'environnement : Secteur d'activité : Assurance 🛡️ Organisation : Équipe de Gestion Courante Décisionnel au sein de la Direction des Études Enjeux : Assurer le maintien de la qualité de service sur un périmètre applicatif décisionnel développé en Spark/Scala, en assurant le suivi des traitements, la résolution des incidents et la mise en œuvre des évolutions. Ce que tu feras concrètementDans le cadre de cette mission, tu seras notamment amené(e) à : ➞ Assurer le suivi quotidien des traitements en Spark/Scala ➞ Analyser et corriger les incidents fonctionnels, avec leurs éventuelles reprises de données ➞ Réaliser les évolutions confiées sur le périmètre ➞ Tester les corrections d'incidents et les développements réalisés ➞ Mettre à jour la documentation et assurer la mise en production des corrections et développements Ton environnementTechnologies : Spark, Scala, Hadoop, Hive, HDFS, YARN, Oozie, Parquet, Kafka, Spark Streaming, MongoDB, JSON, Avro Outils : Cloudera, Git Bases de données : Oracle
Pour un client basé en région parisienne, je suis à la recherche d'un SOC Manager expérimenté (min 5 ans d'expérience). Rédaction de documents stratégiques et opérationnels, Préparation de l'équipe SOC, Amélioration des règles de détection du SIEM, Rédaction de playbooks de réaction. La connaissance des solutions Logpoint et The Hive est nécessaire. Cette mission est une mission d'expertise, avec une visibilité sur 2 mois. La mission peut démarrer rapidement et un entretien avec le client pourra avoir lieu cette semaine.
