Trouvez votre prochaine offre d’emploi ou de mission freelance Big Data

Assurer le RUN et les évolutions des socles hébergés sur les 3 data centers du groupe. Garantir le fonctionnement optimal des outils ou systèmes dont il a la charge. Garantir la résolution des incidents de niveau 2 ou 3 et contribuer à l'élaboration d'actions préventives sur les éléments dont il a la charge. Apporter l'expertise, conseil et assistance dans l'usage et la mise en œuvre d'applications auprès des projets, support aux projets. Contribuer à l'évolution des cibles et des trajectoires du SI

Nous cherchons à renforcer notre équipe avec un Architecte / Administrateur Big Data Hadoop (H/F). Vous intégrez une équipe et serez en charge de l'infrastructure de stockage de données, de l'automatisation et du maintien en conditions opérationnelles pour la mise en place d'un nouveau programme. L'objectif de ce programme est la mise en oeuvre d'une nouvelle offre de service BIGDATA pour l'ensemble du Groupe. Cette nouvelle offre de service doit : - Être Industrielle avec différents environnements distincts ( DEV, INT, Homol, PROD, DR) - Être Sécurisée, afin d'accueillir des données de tout type C1, C2, C3 - Être Résiliente, avec de la haute dispo sur l'ensemble des composants - Être Secourue avec un DR distant - Permettre le partage des données, de manière sécurisée, entre n'importe quelle équipe du groupe SG afin - Que chacun puisse travailler sur les données les plus fraîches - Qu'il n'y ait pas de multiples copies des même données au sein du datalake Dans le but de réduire le Time To Market à quelques minutes, nous avons construit deux équipes : une pour le développement d'API ; une autre pour le déploiement et le maintien en condition opérationnelles pour l'offre Big Data. Allez on en dis plus... Vos principales missions seront : - Maintien de la production en conditions opérationnelles - Mise en oeuvre de l'infrastructure de secours - Participer à l'automatisation de l'infrastructure Bigdata (HADOOP) s'appuyant sur TERRAFORM et ANSIBLE - Extension automatisée des clusters Bigdata avec l'ajout de datanodes - Ajout automatisé de nouvelles fonctionnalités (Hbase, Encryption) Informations complémentaires : possibilité de télétravail plusieurs jours par semaine. Ingénieur de formation, nous recherchons un Expert Hadoop (Cloudera CDP) maîtrisant Ansible pour participer à la construction de notre nouvelle plateforme Big data. Vous avez une expérience d'au moins 10ans sur un poste similaire. Vous êtes expert Hadoop maitrisant Ansible et avec des compétences techniques reconnues sur la technologie UNIX: Linux, Shell, Python, Open source, SSL, Redhat, Agile Scrum, Terraform. Vous avez également de solides compétences sur HDFS, Oozie, Zookeeper, Ranger, Knox, Kerberos, LDAP, Hbase, Kafka, Cloudera Manager, Spark, Hive, Nifi D'une excellente qualité d'écoute, disponible, réactif et rigoureux. Notre processus de recrutement : En 4 étapes ! Tout simplement. Dans un premier temps, vous échangerez avec l'un d'entre nous ; Puis, nous aurons le plaisir de vous rencontrer lors d'un entretien ; Pour finir, vous discuterez métier avec l'un de nos managers opérationnels ; Bienvenue chez nous ! Ce poste vous intéresse ? Vous êtes motivé(e) et vous avez hâte de commencer ? Place à l'action : Postulez ou partagez avec votre réseau ! Python rigoureux à l'écoute Kafka Ansible Hadoop Spark Hive Terraform Hbase Nifi

Le bénéficiaire souhaite mettre en œuvre plusieurs évolutions de son socle technique. A ce titre, le Bénéficiaire souhaite bénéficier de l'expertise du Prestataire en termes de Data Engineering Dans ce cadre la prestation consiste à contribuer à/au(x) : - La création des IHM pour les questionnaires - La mise en place d'une base de données, déversement dans le lake - La mise en place de plusieurs liens avec des appli groupe (pour récupérer des données ou en pousser). Les livrables attendus sont : -Développement BigData pour le compte de plusieurs applications - Respect des règles et des best practices. Les expertises attendues pour réaliser cette prestation sont listées ci-après : • Hadoop (Big Data) • Hive • Python • Spark

Le centre de solution PAIEMENTS est en charge des applications monétiques ( porteur et commercants) et paiements ( virement, chèques... ) Pour répondre à de nouveaux besoins métiers sur l'exploitation de la DATA des paiements, nous faisons évoluer notre équipe BIG DATA. Le bénéficiaire souhaite mettre en oeuvre plusieurs évolutions de son socle technique. Le Bénéficiaire souhaite bénéficier de l'expertise du Prestataire en termes de Data Engineering. Dans ce cadre la prestation consiste à contribuer à/au(x) : - Développement Spark/Scala et HIVE - Une bonne expertise des environnements hadoop Les livrables attendus sont : - Revue de code et re-factoring - Projet agile (Scrum) - Traitement d'un gros volume de données - L'application des normes de développements

Missions : o Apporter une expertise en Big Data pour faciliter la manipulation des données o Définir les solutions techniques permettant le traitement massif de données o Mettre en place des solutions de stockage de données (SQL, NoSQL, etc.) o Veiller la sécurisation et la clarté des pipelines de données pour faciliter l’analyse et la transformation Il s’appuie si nécessaire sur les référents techniques des diverses briques si ces dernières sortent du cadre de sa mission. Il met en avant ses qualités pour mener à bien ses missions : o Autonomie, rigueur et force de proposition o Capacités d'analyse et de synthèse. o Esprit d’équipe Activité principale : o Assure la création, la maintenance, l'optimisation et la sécurité des bases de données o Détecte, propose et suit les optimisations des requêtes SQL, PL/SQL afin de garantir les meilleures performances de nos applications métier o Assure le support aux équipes de développement afin d’identifier et proposer des solutions performantes SGBD les mieux adaptées d’un point de vue métier Activité secondaire : o Veille technologique sur les outils utilisés au sein du projet o Partage et formation sur les guides de bonnes conduites

Dans ce cadre la prestation consiste à contribuer à/au(x) :  Développement, Clean code,  L'intégration continue,  La définition des solutions dans l'environnement applicatif (Cloud Platform / Spark Data processing)  Mise en place et suivi des développements en production du socle de fonctionnalités Processing / préparation de données  L'assistance à la conception technique du produit  Diverses assistances techniques (sujets techniques complexes sur le produit, etc...)  La revue de code  L'intégration cohérente du produit dans le système d'information en synchronisation avec l'architecture technique  L'analyse de l'impact de la conception du produit sur l'architecture technique du SI  L'architecture technique aux choix d'implémentation dans le SI  La maintenabilité technique du produit  La stratégie de développement et de tests selon critères pré-définis Autres :  Support applicatif via le monitoring et résolution associée  DevOps pour les parties IAAS et CD.  Environnement anglophone Les livrables attendus sont : de solutions et d'architecture technique pour le backend 2.Développements d'alimentations et processing de données 3.Implementation pour l'exploitation des données, restitution dans des Datasets ou Datamarts adéquats et maintenance évolutive du backend 5.Mise en œuvre de méthodes d'amélioration continue : Craft & Prod CI 6.Monitoring et CI sur qualité du code

Nous sommes à la recherche d'un Business Analyst dynamique et expérimenté, ayant une expertise en Big Data, pour rejoindre notre équipe. Le candidat idéal sera responsable de l'analyse des données complexes, de la génération d'insights exploitables et de la collaboration avec les équipes métier pour prendre des décisions stratégiques basées sur les données. Responsabilités : Analyse des besoins métier : Travailler en étroite collaboration avec les parties prenantes métier pour comprendre leurs objectifs, leurs défis et leurs besoins en matière d'analyse de données. Collecte et exploration des données : Collecter, nettoyer et préparer les données à grande échelle à partir de différentes sources, y compris les données structurées et non structurées. Analyse des données : Utiliser des outils d'analyse avancée pour extraire des insights significatifs à partir des ensembles de données Big Data, en identifiant des tendances, des modèles et des anomalies. Rapports et visualisation : Créer des rapports et des tableaux de bord interactifs pour communiquer les résultats de l'analyse aux parties prenantes, en utilisant des outils de visualisation de données tels que Tableau, Power BI ou Qlik. Support à la prise de décision : Fournir des recommandations stratégiques basées sur les insights générés à partir des données, afin d'aider les décideurs à prendre des décisions éclairées. Optimisation des processus : Identifier les opportunités d'optimisation des processus métier grâce à l'analyse des données, et proposer des solutions pour améliorer l'efficacité opérationnelle. Compétences requises : Solide expérience en tant que Business Analyst, avec une expertise avancée en analyse de données et en modélisation. Connaissance approfondie des technologies et des outils Big Data, tels que Hadoop, Spark, Hive, ou HBase. Maîtrise des langages de requêtes et de programmation Big Data, comme SQL, Python, ou R. Capacité à travailler avec de grands ensembles de données et à utiliser des techniques d'analyse statistique et machine learning. Excellentes compétences en communication, avec la capacité à présenter des résultats complexes de manière claire et concise. Aptitude à travailler de manière autonome et en équipe, avec un fort sens de l'organisation et de la gestion du temps.

Environnement Technique :  Tous composants de la distribution HDP 2.6.5 (Hortonworks)  Tous composants de la distribution HDP 3.1.x (Hortonworks)  Technologie KAFKA  Compétences de développements en Shell, Java, Python  Moteur Elasticsearch incluant les fonctionnalités soumises à licence  Docker, Kubernetes, système distribué sur Kubernetes  Infrastructure as Code  DevOps : Ansible, Git, Nexus, Jenkins, JIRA, etc...  Os Linux, Kerberos, SSL, Ldap, RDBMS, SQL Mandatory :  Tous les composants des distributions Hadoop  Tous les composants de la suite Elasticsearch : Kibana, Logstash, suite beats  Administration de composants big data

Nous recherchons pour une entreprise de renommée internationale spécialisée dans le secteur de l'énergie, Un Ingénieur DIGITAL H/F en freelance sur Lyon. 2 jours de Télétravail/3 jours sur site Objectif : Déployer et maintenir les outils digitaux et être force de proposition sur la mise en place de nouvelles technologies de type Big Data, BI et IA Vous serez en charge de : Assurer le déploiement de BI (antares, tableau) Participer aux Kaizens Proposer des solutions Déployer et maintenir les logiciels fournisseurs de production (telsar, konax, liot box, diss) Etre force de proposition sur le déploiement de nouvelles technologies IA/BI Former et animer les key users Assurer la cohérence de la MAP et outils AMT

Architecte big data HDP ou CDP on premise Au sein de l’équipe socle BigData, en lien avec le product owner socle et l’architecte déjà présent, le profil prend un rôle d’architecte / expert sur le socle BigData : • Porter des sujets d’architecture pour intégrer le Cloudera Data Platform • Contribuer à l’industrialisation de notre plateforme Big Data (déploiement des composants, supervision, sécurité, etc…), • Rédiger des modes opératoires et des documentations techniques pour faciliter la compréhension et la montée en compétence de l’équipe, • Qualifier et chalenger les architectures applicatives proposer par les équipes projets • Identifier les faiblesses des environnements et proposer des solutions pour optimiser et améliorer la robustesse de la plateforme , • Apporter de l’expertise sur les incidents et être force de proposition sur les nouveaux usages (APIsation, PRA/PCI, etc…), • Si le profil a une fibre chef de projet / scrum master, il pourra prendre en charge une partie de l’animation de l’équip. Ces activités nécessitent une connaissance technique de l’environnement Hadoop Big Data acquise sur plusieurs architectures Big Data déployées en production, le sens du service et une forte autonomie. Une bonne vision d’ensemble sera nécessaire : sécurité, exploitation, etc… ü Livrables de la prestation : • Etudes d’architecture • POC : Code source commenté / Tests • Industrialisation de composant du socle • Documentations diverses ü Compétences techniques requises : • Maitrise d’une solution HDP ou CDP on premise • Cloudera Manager, Kerberos, Ranger • Kafka • Spark, Zeppelin • HDFS, Hive, Hbase • Oozie • Yarn • Jenkins • Docker L’ensemble de ces activités nécessitent une très bonne connaissance des composants Hadoop. Une expérience de 3 à 5 ans sur un poste d’architecte Big Data nous semble nécessaire pour bien appréhender ses activités. Ces activités nécessitent une forte autonomie, un mindset d’architecture et d’administration de plateforme Big Data, de la curiosité et une appétence pour la mise en place de solutions techniques. Un profil ayant une appétence pour l'animation d'équipe serait idéal. Une expérience réalisée sur un cluster sécurisé et « kerberisé » serait un plus, tout comme une expérience de déploiement de cluster à la demande.

Au sein d'une grande banque française basée à paris, vous rejoindrez une équipe en charge de la plateformes et des outils de gestion de données : socle de données (datalake on premise et dans le cloud public), outils de data management et urbanisation des architectures de données. Vous interviendrez sur les technologies Hadoop en tant que support technique de niveau 2 et 3. Dans ce cadre la prestation consiste à contribuer à : Au référencement technique sur les composants Big data A l'assistance aux différentes équipes La rédaction de la documentation pour les projets de la plateforme BIG DATA. Support aux applications sur le périmètre BIG DATA La veille technologique permettant de tester de nouvelles fonctionnalités et nouveaux outils

Description de la mission : Au sein de l’équipe socle BigData, en lien avec le product owner socle et l’architecte déjà présent, le profil prend un rôle d’architecte / expert sur le socle BigData : - Porter des sujets d’architecture pour intégrer le Cloudera Data Platform au sein du SI UCN - Contribuer à l’industrialisation de notre plateforme Big Data (déploiement des composants, supervision, sécurité, etc ), - Rédiger des modes opératoires et des documentations techniques pour faciliter la compréhension et la montée en compétence de l’équipe, - Qualifier et chalenger les architectures applicatives proposer par les équipes projets - Identifier les faiblesses des environnements et proposer des solutions pour optimiser et améliorer la robustesse de la plateforme , - Apporter de l’expertise sur les incidents et être force de proposition sur les nouveaux usages (APIsation, PRA/PCI, etc ), - Si le profil a une fibre chef de projet / scrum master, il pourra prendre en charge une partie de l’animation de l’équipe socle. Ces activités nécessitent une connaissance technique de l’environnement Hadoop Big Data acquise sur plusieurs architectures Big Data déployées en production, le sens du service et une forte autonomie. Une bonne vision d’ensemble sera nécessaire : sécurité, exploitation, etc Livrables de la prestation : - Etudes d’architecture - POC : Code source commenté / Tests - Industrialisation de composant du socle - Documentations diverses Compétences techniques requises : - Maitrise d’une solution HDP ou CDP on premise - Cloudera Manager, Kerberos, Ranger - Kafka - Spark, Zeppelin - HDFS, Hive, Hbase - Oozie - Yarn - Jenkins - Docker ++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++ Cette prestation vous intéresse ? N’hésitez plus, déposez votre candidature immédiatement ! Transmettez-nous au plus tôt votre CV actualisé en français au format WORD, quelques lignes de présentation, votre date de disponibilité, votre lieu d’habitation, votre TJ le plus attractif pour cette prestation.

Cherry Pick est à la recherche d’un Ingénieur Production Big Data pour l’un de ses clients. Missions : Réaliser la construction le développement (BUILD) et la maintenance (RUN) des solutions de supervision applicative du cluster dans des environnements applicatifs complexes, sur l’environnement technique décrit plus bas Appliquer les éléments de la démarche qualité définie ainsi que ceux de la politique de sécurité, dans le respect des normes Optimiser l’usage des composants et anticiper les évolutions fonctionnelles et techniques ; en cohérence avec les produits livrés par les squads de développements métiers CATS Accompagner les tours applicatives du cluster sur leur usage des solutions de supervision applicative Automatiser les processus du périmètre (BUILD, RUN) Stack : Solution requise : Hadoop, HDFS, Spark, Kafka, Oozie, Hive, Sqoop, Airflow, Elasticsearch

Bonjour, Pour le compte de l'un de mes clients dans le secteur du luxe, je suis à la recherche d'un Business Analyst DATA. Le client souhaite remplacer la BA Data actuelle (4ans XP) par un BA Data plus expérimenté : 8 à 10 d’expérience. Nous avons environ 1 mois pour la remplacer ; c’est un poste clé du dispositif Datastore. Contexte : projet MDM produits dans le Cloud Azure, avec une équipe en Nearshore au Maroc (2 à 4 Data Engineers ; 1 Data Architecte, 1 CP, 1 QA). • Le BA sera responsable de glaner le besoin métier pour le retranscrire en spec fonctionnel/technique à l’équipe o Animation ateliers Business o Alimentation du backlog • Il travaillera sur plusieurs projets en parallèle : Run (correctif/évolutif), principalement sur les projets de transformation > modernisation du MDM, création d’un nouveau référentiel de données, … • Il supportera le CP Nearshore dans la coordination des activités, s’appuiera sur le Data Architect sur les aspects techniques • Il supportera les tests en collaboration avec le QA. • II sera responsable du maintient à jour de la documentation sous Confluence.

Au sein des équipes Data Factory, Mon client intègre une nouvelle application en lien avec SAP. Ils cherchent un chef de projet pour piloter le projet. Coordination des parties prenantes, animer les ateliers, suivi du planning et des budgets. Une connaissance ERP/SAP serait apprécié EnvironnementTechnique : Information System for P1 – Finance (Esker + Kyriba + Notilus), P1 – Procurements (Nazare, OTC), P2 - EDI (GDI platform) + P2 Supply Chain/Manufacturing (workbench schedulling) + P3(stocks and products labelling)