Trouvez votre prochaine offre d’emploi ou de mission freelance Big Data à Paris

Business Analyst Compréhension des enjeux métiers (finance, controling, commercial) dans un environnement complexe Analyse fonctionnelle afin de comprendre les problématiques et besoins des clients internes Animation des workshops pour converger vers une solution quand il y a divergences des participants Formalisation des besoins et identification des solutions fonctionnelles Définition des priorités Suivi des développement en méthode Agile Test et validation Participation au réflexions d'architectures et des évolutions de notre écosystème La mission nécessite plus ponctuellement un rôle de gestion de projet : Chef de projets Identification des gains/risques et arbitrages projets en conséquences Animation des comités (suivi projet, Copil, Codir), des workshops Définition et suivi du planning, organisation et suivi des capacités de développement Reporting et alertes (sous/sur conso budgétaire, dérapage planning) Livrables attendus : Documents de cadrage projet (et fiches de suivi de projet pour les différents comités) Cahier des charges fonctionnel Rédaction des tickets dans le cadre de la méthode agile Scrum Plan de tests et recette

Au sein de l'équipe projet Business Intelligence & Big Data, l'expert SPARK/SCALA aura les activités suivantes : - Conception détaillée, fonctionnelle et technique. - Développements SPARK / SCALA - Contribution à la formalisation des plans de tests, exécution des tests unitaires et d'un premier niveau de tests d'intégration. - Résolution des anomalies pendant les phases d’intégration fonctionnelle et de recette utilisateur. - Packaging et déploiement en pre-production et production. - Optimisation des traitements afin de garantir la qualité de service standards du DWG. - Mise en œuvre des solutions industrielles et de réentrance permettant une reprise optimum des traitements en cas d’incident en production. - Mise en service et accompagnement au déploiement. - Suivi des environnements. Le consultant devra travailler en étroite collaboration avec le Chef de Projet, responsable du lot et l'équipe de développement du Programme. Une connaissance d'Oracle est nécessaire Une expérience >5 ans sur des technologies SPARK & SCALA est nécessaire Une connaissance de contexte technologique similaire est un plus

En tant que Consultant Infra - Big Data, vos missions seront : Administrer et superviser l'infrastructure technique Big Data (écosystème CDP et ELK) Installer, paramétrer et configurer les composants et les ressources de la plateforme Assurer la documentation et la transmission des procédures aux équipes d'exploitation Assurer la qualité et la conformité des opérations dans le respect des règles de l'art et des procédures mises en oeuvre Réaliser et maintenir l'inventaire des différents composants de son périmètre Maintenir les outils et procédures nécessaires à l'exploitation et la surveillance des traitements (scripts, modules de supervision, etc.) Traiter le niveau 3 des incidents, de problèmes, des demandes et des changements sur le périmètre socle Contrôler et optimiser les environnements (capacité, disponibilité, sécurité, etc.) Compétences Techniques principales : Socle Infrastructure et Système : Linux CentOS/Rocky, Kerberos, Terraform, Ansible Socle Middleware : Cluster Cloudera CDP, Cluster ELK, Freeipa Bases de données SQL/NoSQL : PostgreSQL, HBASE, Hive Hyperviseur : VMWare Réseau : Fortinet, Haproxy Détail du poste : Type de contrat : CDI, 39h Localisation : Basé à Paris 2e Déplacements à prévoir : Non Télétravail : Oui (en fonction du profil et de l'autonomie sur le poste) Salaire : 35k-40KEUR, selon profil et expériences Dans la continuité de sa politique RH en faveur de l'égalité professionnelle, la politique d'embauche de la société Infodis vise à améliorer la représentation des personnes en situation de handicap sur l'ensemble des offres proposées. Pourquoi nous rejoindre (nos avantages) ? Prime de Participation Carte Ticket Restaurant Swile (8,40 Euros par jour travaillés pris en charge à 70%) Participation aux transports (50%) Prime de vacances Mutuelle Comité d'entreprise Prime de cooptation Notre process de recrutement : Entretien téléphonique avec un recruteur de l'équipe ? Entretien (par visio en général) avec un référent technique pour explication du contexte et périmètre de la mission + vérifier l'adéquation technique Entretien client (si besoin) Embauche et Intégration du collaborateur ?

Au sein d'une équipe d'expertise sur le volet Ops & Architecture vous intégrez la team en tant qu'architecte Cloud GCP & DevOps Big Data. Vos missions sur ce volet : Administration de la plateforme Hadoop présente Développer et continuer la migration vers GCP sur certaines applications Excellente maîtrise de Kubernetes attendues Connaissance complète de l'environnement Big Data et de la culture DevOps (Hadoop, Kafka, Elastic, Ansible, Kubernetes...) Endosser le rôle de référent technique sur le sujet Big Data

L’objectif est de développer une plateforme appelée Supply data lake basée sur des technologies Big Data robustes et évolutives. Cette plateforme sera capable de traiter un volume substantiel de données dans les différents pays où Engie opère. Son objectif principal est de capturer divers indicateurs dans un référentiel centralisé, permettant l’accès à des vues standardisées et transversales de ces indicateurs. L’un des principaux objectifs de 2024 est de construire une première version d’un outil de P&L quotidien pour l’entité B2B France. En plus de ses responsabilités techniques, le développeur s’assurera de la conformité avec les directives du Groupe concernant l’utilisation et l’architecture du cadre interne. Il collaborera également avec les autres parties prenantes du projet afin de promouvoir ces directives et de proposer des fonctionnalités communes pour la plateforme. L’équipe est principalement située à Paris, mais des déplacements occasionnels à Lyon et à Bruxelles sont à prévoir. Le rôle du développeur senior dans ce projet consistera à concevoir et à mettre en œuvre les composants suivants de la plateforme : - L’acquisition des données - Traitement et normalisation des données. - Distribuer les données aux différentes parties prenantes. - Construire et améliorer le cadre commun, y compris la surveillance, CI/CD, les tests, la performance, la résilience, les pratiques de développement et la qualité du code... Les principales activités sont les suivantes : - Recueillir, comprendre, remettre en question et affiner les exigences et les opportunités commerciales. - Concevoir des solutions en suivant les lignes directrices de l’architecture. - Diriger les activités de développement et apporter une contribution en tant que senior/expert. Les activités de développement impliquent l’élaboration et la maintenance d’un code efficace, réutilisable et fiable qui respecte des normes élevées en matière de qualité des logiciels, de conception et de principes d’essai, tout en fournissant des solutions dans les délais et dans les limites du budget. - Soutenir l’amélioration continue des services et des applications en identifiant les goulets d’étranglement et les bogues et en proposant des solutions. - Fournir aux utilisateurs des services prêts pour la production, en s’efforçant d’atteindre le niveau de satisfaction le plus élevé. - Soutenir la phase de production, notamment en fournissant des outils de surveillance et d’alerte afin de minimiser l’impact de l’assistance pendant la phase de développement. - Rédiger et mettre à jour la documentation technique en anglais et la mettre à la disposition de l’équipe et des partenaires. - Assurer une communication efficace et opportune avec toutes les équipes concernées. XP min 5 ans python, api technologies big data AWS 3 ans XP min

La prestation consiste à contribuer à/au(x) : Maintien de l'environnement legacy et contribution au projet de migration de l'application vers le Big Data. - Mise en place de la One Plateforme (On premise + Cloude public) - Challenge des choix architecturaux - Audit du codes existants et solutions de factorisation du code - contribution à la validation des futurs développement - Développements, tests unitaires et homologation technique sur des composants applicatifs dans les plannings et délais demandés. La mission doit être effectuée dans le cadre des normes du projet. - Assistance sur les développements produits jusqu'à la mise en production. - Support de production

Le centre de solution PAIEMENTS est en charge des applications monétiques ( porteur et commercants) et paiements ( virement, chèques... ) Pour répondre à de nouveaux besoins métiers sur l'exploitation de la DATA des paiements, nous faisons évoluer notre équipe BIG DATA. Le bénéficiaire souhaite mettre en oeuvre plusieurs évolutions de son socle technique. Le Bénéficiaire souhaite bénéficier de l'expertise du Prestataire en termes de Data Engineering. Dans ce cadre la prestation consiste à contribuer à/au(x) : - Développement Spark/Scala et HIVE - Une bonne expertise des environnements hadoop Les livrables attendus sont : - Revue de code et re-factoring - Projet agile (Scrum) - Traitement d'un gros volume de données - L'application des normes de développements

Dans ce cadre la prestation consiste à contribuer à/au(x) :  Développement, Clean code,  L'intégration continue,  La définition des solutions dans l'environnement applicatif (Cloud Platform / Spark Data processing)  Mise en place et suivi des développements en production du socle de fonctionnalités Processing / préparation de données  L'assistance à la conception technique du produit  Diverses assistances techniques (sujets techniques complexes sur le produit, etc...)  La revue de code  L'intégration cohérente du produit dans le système d'information en synchronisation avec l'architecture technique  L'analyse de l'impact de la conception du produit sur l'architecture technique du SI  L'architecture technique aux choix d'implémentation dans le SI  La maintenabilité technique du produit  La stratégie de développement et de tests selon critères pré-définis Autres :  Support applicatif via le monitoring et résolution associée  DevOps pour les parties IAAS et CD.  Environnement anglophone Les livrables attendus sont : de solutions et d'architecture technique pour le backend 2.Développements d'alimentations et processing de données 3.Implementation pour l'exploitation des données, restitution dans des Datasets ou Datamarts adéquats et maintenance évolutive du backend 5.Mise en œuvre de méthodes d'amélioration continue : Craft & Prod CI 6.Monitoring et CI sur qualité du code

Le département Data IA (DaIA) a la charge de mettre à disposition des métiers un socle technologique transverse permettant de mettre en production et industrialiser les cas d’usage Data et IA en développant notamment une plateforme de donnée BigQuery. Pour cela, nous recherchons un Data Ingénieur qualifié pour nous aider à concevoir, construire et gérer nos systèmes de données : • Migration des données du SI entreprise vers la plateforme de données GCP • Participer à l’industrialisation des cas d’usage métiers du groupe • Assurer la qualité, la fiabilité et l'accessibilité des données. • Collaborer avec les équipes de data science pour comprendre les besoins en données et mettre en place les solutions appropriées. • Assurer la maintenance et l'optimisation des systèmes de données existants. La prestation s’effectue au sein du département DaIA avec une présence à temps complet, et pourra se dérouler en présentiel ou à distance, selon les besoins des équipes. Le candidat choisi devra se sentir pleinement investi de sa mission et motivé par les différents livrables attendus par le service.

En étroite collaboration avec le Chef de Service, les architectes fonctionnels, les ingénieurs Data, la MOA et les métiers, la mission est garante de la bonne réalisation de certains projets transverses. Elle se compose à part égale d'un volet 'Chef de projet' et d'un volet 'PMO'. Volet Chef de Projet - Piloter et assurer la mise en œuvre des évolutions/projets dont vous aurez la charge dans le respect de la qualité, coûts et délais définis avec les intervenants, des process et normes G2S - Produire le reporting des évolutions/projets dont vous aurez la charge Volet PMO - Effectuer un reporting régulier et rigoureux vers son responsable en veillant à la qualité des informations de pilotage - Définir et mettre en place un plan de communication autour des différents projets et instances - Mettre en oeuvre et piloter le planning des travaux de l'équipe et des contributions auprès des autres équipes - Travailler les différents templates projets, la roadmap fonctionnelle, l'optimisation des interactions avec les autres services - Coordonner les différents prestataires

Je suis à la recherche de profil Architect senior très Data pour deux projets chez mes clients. Missions : Concevoir, implémenter et configurer les plateformes Big Data et toute autre composante de stockage ou d'alimentation d'une architecture data, permettant de traiter des volumes importants de données dans les meilleures conditions, Participer à la construction de nouveaux connecteurs et pipelines via l'extraction de données par batch sur l'une ou plusieurs de ces technologies (Azure Data Factory, Pyspark) et le stockage de données dans notre Data Lake et notre Data Warehouse, pour répondre aux besoins du métier (data science et data analyses notamment), Mener des études d'opportunité et préconisation d'architecture cibles, et rédiger la documentation relative aux architectures développées, Définir les choix techniques en cohérence avec le schéma directeur du SI Clarins, Industrialiser, tester et déployer les solutions mises à disposition, Garantir le maintien dans les conditions opérationnelles des outils data, dont les migrations et les montées de version, Assurer la gestion/optimisation du stockage, des performances, Sécuriser des traitements de données et le stockage, * Participer à la veille technologique.

Bonjour, VISIAN est une société de conseil spécialisée autour de l'innovation, la conception produit et la data. Dans un marché où les enjeux de recrutement sont clés et où le nombre de freelances est en constante augmentation, Visian a créé une entité dédiée au recrutement de freelances experts du digital et d’IT: VASKA. Dans le cadre de ses projets clients, VISIAN recherche un/e Data Engineer. Contexte : Le candidat intégrera un pôle Data à la DSI et une équipe projet qui sera responsable de migrer des flux d'intégration de données de POWER Center vers Databricks. Missions : Le candidat sera responsable de migrer des flux ETL développés sur Informatica vers Databricks. Une connaissance d'informatica et AWS est très appréciée. Le candidat doit maitriser le langage SQL et Python et avoir une bonne culture Data des best practices en terme de nettoyage, de transformation et modélisation de données Une certification sur Databricks est également fortement appréciée. Si vous êtes à l’écoute du marché en ce moment, je vous invite à postuler en m’envoyant votre candidature. Bien à vous, Justine

Bonjour, Pour le compte de l'un de mes clients dans le secteur du luxe, je suis à la recherche d'un Business Analyst DATA. Le client souhaite remplacer la BA Data actuelle (4ans XP) par un BA Data plus expérimenté : 8 à 10 d’expérience. Nous avons environ 1 mois pour la remplacer ; c’est un poste clé du dispositif Datastore. Contexte : projet MDM produits dans le Cloud Azure, avec une équipe en Nearshore au Maroc (2 à 4 Data Engineers ; 1 Data Architecte, 1 CP, 1 QA). • Le BA sera responsable de glaner le besoin métier pour le retranscrire en spec fonctionnel/technique à l’équipe o Animation ateliers Business o Alimentation du backlog • Il travaillera sur plusieurs projets en parallèle : Run (correctif/évolutif), principalement sur les projets de transformation > modernisation du MDM, création d’un nouveau référentiel de données, … • Il supportera le CP Nearshore dans la coordination des activités, s’appuiera sur le Data Architect sur les aspects techniques • Il supportera les tests en collaboration avec le QA. • II sera responsable du maintient à jour de la documentation sous Confluence.

Votre principale mission, au sein de nos équipes, sera : le prototypage, l’itération, et la mise en production des algorithmes 2 jours de présentiel à Paris ou Bordeaux Mission a pourvoir ASAP Mission très longue Un eexpérience de mise en prod est indispensable pour ce poste Expérience en Start-up et / ou Scale-up appréciée Votre principale mission, au sein de nos équipes, sera : le prototypage, l’itération, et la mise en production des algorithmes 2 jours de présentiel à Paris ou Bordeaux Mission a pourvoir ASAP Mission très longue Un eexpérience de mise en prod est indispensable pour ce poste Expérience en Start-up et / ou Scale-up appréciée

Collaboration étroite avec les parties prenantes pour comprendre les besoins et les objectifs: Recueil du besoin auprès des utilisateurs et définition des cas d'usage Entretiens individuels Workshop UX research Ateliers de conception détaillée avec l'équipe UX/UI Déclinaisons des parcours et rédaction des users stories Respect de la méthode INVEST Utilisation de l'outil JIRA Gestion du backlog de produits et définition des exigences du produit Planification et priorisation des fonctionnalités du produit Coordination des équipes de développement et suivi de l'avancement du projet Validation et acceptation des fonctionnalités développées Communication régulière avec l'équipe et les parties prenantes pour assurer la satisfaction du produit Analyse des données et des retours utilisateurs pour orienter les décisions de développement Participation aux réunions de planification, de rétrospective et de revue de sprint Production de supports de communication Travailler en étroite collaboration avec les équipes de data scientists, d'ingénieurs en IA, ainsi qu'avec les experts métiers pour définir les besoins et les spécifications techniques des projets

Un grand groupe bancaire basé en France cherche à renforcer son équipe métier par l'intégration d'un ingénieur Data (H/F) spécialisé dans la technologie Datastage ayant évolué dans le secteur bancaire et risque de crédit. Détails de la mission : - Mettre en place la collecte et mettre celle-ci à disposition des données au sein de l’entreprise. - Industrialiser et mettre en production des traitements sur les données (par exemple : mise à disposition de tableaux de bords, intégration de modèles statistiques) en lien avec les équipes métiers et les équipes qui les analysent. Activités: - Mettre à disposition de la donnée aux équipes utilisatrices - Mettre en production de modèles statistiques - Suivre le projet de développement - Développer le job spark - Traiter et ingérer plusieurs formats des données - Développer des scripts - Développer et Implémenter les collectes de données, les jobs de traitement et Mapping de données - Développer des moyens de restitution via génération de fichier et ou API & Dashboarding - Collecter toutes les données et les fournir aux clients en tant qu'API ou fichiers - Développer de pipelines d'ingestion à partir de différentes sources (streaming et batch) ainsi que des spark jobs le prétraitement des données et calcul des indicateurs de performance (KPI) - Développer des API génériques d’ingestion et de traitement de données dans un environnement HDP - Participer à la conception, mise en place et administration de solutions Big Data - Participer à l’installation, administration et configuration des Hadoop clusters. Mettre en place en Spring Boot des services d'extraction de data du système legacy (tera data), la data sera par la suite envoyée au data lake via des topics Kafka - Normaliser et agréger les données afin de produire les rapports sous forme de Business View