Trouvez votre prochaine offre d’emploi ou de mission freelance Big Data

Dans le cadre du renforcement d'une équipe Big Data, chez l'un de nos clients grands comptes, nous recherchons un DataOps Engineer confirmé pour intervenir principalement sur des activités de Run, fiabilisation et évolution d'une plateforme Data. Vous intégrerez une équipe fonctionnant en mode Agile et serez garant du bon fonctionnement, de la disponibilité et de l'évolution du socle technique Data. Vous aurez pour missions : Le Run quotidien et le maintien en conditions opérationnelles de la plateforme Data. L'analyse et la résolution des incidents techniques. La gestion de l'obsolescence technique et applicative. L'amélioration de la performance, de la disponibilité et de la scalabilité du socle de données. Le déploiement et l'exploitation de services dans un environnement Cloud Azure. L'automatisation et l'industrialisation des déploiements via Terraform et CI/CD. La supervision et la fiabilisation des traitements et flux de données. L'exploitation et l'évolution de composants Spark, Databricks, Airflow, Kafka et Hadoop. La coordination avec les équipes projets, IT et métiers. Environnement technique Azure – Databricks – Spark – Python – Scala – SQL – Airflow – Kafka – Hadoop – Terraform – Bases relationnelles et NoSQL – CI/CD – DevOps / DataOps

Il est garant de l'accès qualitatif aux sources de données. Il s'assure de la maîtrise de la donnée et est garant de la qualité de son utilisation (référencement, normalisation, et qualification) afin d'en faciliter l'exploitation par les équipes (Data Analysts et Data Scientists). Il contribue également à la définition de la politique de la donnée et à la structuration de son cycle de vie dans le respect des réglementations en vigueur, en collaboration avec le Chief Data Officer. Son périmètre d'intervention est axé sur les systèmes applicatifs autour de la gestion de la donnée et du traitement, et sur les plateformes Big Data, IoT, … QUALIFICATION ET GESTION DES DONNÉES : • Capte les données (structurées et non structurées) produites dans les différentes applications ou à l'extérieur de l'entité • Intègre les éléments • Structure la donnée (sémantique, etc.) • Cartographie les éléments à disposition • Nettoie la donnée (élimination des doublons, …) • Valide la donnée • Éventuellement, il crée le référentiel de données Résultat attendu Le prestataire devra développer un outil dans databricks qui permet de filtrer les clients selon des critères définis par le client. Il devra livrer une interface permettant d'activer ou désactiver les filtres et produire des rapports sur les clients sélectionnés ce jour. Il devra développer un ETL en utilisant les services AWS les plus adaptés: notamment AWS Step Functions pour l'orchestration / moteur de workflow AWS lambda pour des traitements légers AWS Aurora ou RDS comme BDD relationnelle transactionnelle Eventuellement Databricks si besoin d'offload pour des charges de traitements / transformations lourdes Les données entrantes seront récupérés via des API ou des fichiers plats Les données sélectionnées et transformées seront envoyées dans une 20aine d'API

Contexte de la missionDans le cadre d'un programme de transformation autour de SAP S/4HANA, nous recherchons un(e) Data Product Manager Senior pour piloter les études et évaluations liées aux enjeux Data, Reporting et Visualisation. Vous serez au cœur des échanges entre les équipes métiers, Data, BI et Architecture afin de définir le futur modèle de données et de reporting et d'accompagner la transition des environnements SAP ECC vers SAP S/4HANA. Votre rôle consistera notamment à structurer les besoins métiers, évaluer les impacts sur l'existant et contribuer à la définition d'un portefeuille de produits Data, modèles de données et solutions de reporting. Vos missionsDéfinir et spécifier le futur modèle de données et de reporting basé sur SAP S/4HANA. Analyser les impacts de la transformation sur les systèmes legacy, les rapports et les solutions analytiques existantes. Recueillir et formaliser les besoins auprès des différentes parties prenantes. Comprendre les enjeux, ambitions et objectifs métiers. Organiser et animer des ateliers avec les équipes métiers. Traduire les besoins métiers en solutions Data et BI adaptées. Documenter l'architecture fonctionnelle cible. Réaliser la modélisation des données et concevoir les couches métier, notamment la couche Silver. Coordonner les différents contributeurs Data & BI : architectes, Data Engineers, BI Engineers, etc. Documenter la valeur et les bénéfices attendus des solutions proposées. Participer à la définition du budget et du planning Build / Run. Veiller à l'alignement des solutions avec les principes d'architecture et de gouvernance Data.

Contexte du poste : Nous recherchons un Ingénieur Data expérimenté, spécialisé en Talend, afin d'intégrer le Centre de Production de notre client, acteur du secteur public. Vous interviendrez dans le cadre d'un projet stratégique de migration vers le Cloud portant sur un parc d'environ 70 applications et près de 500 batchs, interfaces et flux Talend. Vous serez au cœur des travaux d'analyse de l'existant et contribuerez à définir les traitements à migrer, à refondre ou à décommissionner. Missions principales : Analyser et auditer un patrimoine important de batchs, interfaces et flux Talend Identifier, comprendre et cartographier les usages et traitements existants Participer aux études et aux travaux de migration vers le Cloud Identifier les traitements à migrer, refondre ou décommissionner Analyser les dépendances et les flux entre les différentes applications Participer à la conception des solutions cibles Rédiger et maintenir la documentation technique associée

Contexte Je recherche pour l'un de mes clients, entreprise industrielle française en pleine transformation digitale, un(e) Ingénieur(e) Data en CDI à Marseille. Cette opportunité est à pourvoir au sein de la DSI (100 collaborateurs), dans un environnement stimulant et innovant. Vous intégrerez le pôle Data et interviendrez sur des projets stratégiques de modernisation des architectures de données. Missions Rattaché(e) au Responsable de Production, vous aurez un rôle clé dans la conception, l'optimisation et la fiabilité des bases de données transactionnelles et décisionnelles. À ce titre, vos missions incluront : Concevoir et modéliser les bases de données en lien avec les chefs de projet, architectes, consultants ERP et experts décisionnels Participer à la mise en place et à l'évolution de l'entrepôt de données (Data Warehouse) et de la "Modern Data Stack" Développer et maintenir les flux de synchronisation entre systèmes (Airbyte, DBT, Airflow, Snowflake...) Assurer l'optimisation des performances des requêtes SQL/noSQL et le support aux équipes de développement Contribuer à l'adaptation du modèle de données dans le cadre du déploiement d'architectures microservices Participer au support technique de niveau 3 et à la veille technologique

Data Scientist and Python Software Developer - London We're looking to recruit a Data Scientist and Python Software Developer with data science skills to join a product team that is focused on building well engineered products. The products provide an intuitive way for retailers and suppliers to interact and consume 'big data' analytics to make better business decisions. This role would consist of working together with a team of statistical analysts, understanding their methodologies and algorithms, and turning them into production ready code written in Python. This role would also require occasional travel to Paris or Munich. Main skills: Excellent knowledge of Python and it's related data science libraries (scikit, pandas, etc) Prior experience of using Python to perform calculations and generate datasets Good statistical knowledge Excellent communication and decision making skills Exposure to working with REST API's Any of the following skills would be an added bonus: Has run code across Hadoop/MapReduce clusters Has code running in a production environment Used SAS before (or at least can decipher SAS code) Worked with very large data sets before (billions of records) Knowledge of SQL/NoSQL database Knowledge or experience in D3.js Experience acting as a mentor/trainer in Python This is 6 month assignment in London with travel to Paris and Munich. Please send your CV to us in Word format along with daily rate and availability.

A propos de JEMS Chez JEMS, nous ne sommes pas simplement une entreprise. Nous sommes des créateurs, des innovateurs et des rêveurs résolument déterminés à changer le jeu. Notre passion est d'apporter des solutions exceptionnelles à nos clients et de bâtir des relations durables. Nous sommes le seul industriel de la donnée en Europe. Notre métier est de créer, manager et exploiter le patrimoine data de nos clients. Vos missions En tant que Business Developer H/F vous aurez la charge de : • Créer et développer de nouvelles relations d'affaires avec des clients potentiels et des partenaires stratégiques • Identifier et explorer de nouvelles opportunités de marché pour nos produits et services • Travailler en étroite collaboration avec nos équipes internes pour élaborer des solutions sur mesure pour nos clients • Prévoir les tendances du marché et anticiper les besoins des clients pour façonner notre stratégie de croissance • Représenter JEMS lors d'événements, de conférences et de réunions pour élargir notre réseau et renforcer notre présence sur le marché • Garder un œil sur la concurrence et élaborer des stratégies pour rester en tête Avantages à travailler chez JEMS : • Un accompagnement personnalisé pour développer votre carrière • L'opportunité de travailler dans un environnement dynamique et stimulant • Une culture d'entreprise qui encourage la créativité, l'innovation et la croissance personnelle • Un package de rémunération compétitif avec des avantages exceptionnels • Un soutien continu pour développer vos compétences et avancer dans votre carrière • Des séminaires d'intégration inoubliables Pour Postuler Si vous êtes prêt(e) à relever le défi et à devenir un acteur clé de notre équipe en tant qu'Ingénieur d'Affaires chez JEMS, envoyez nous votre CV accompagné d'une lettre de motivation convaincante qui montre pourquoi vous êtes la personne idéale pour ce poste. Montrez nous votre passion, votre détermination et votre vision pour l'avenir. Diversité Le Groupe JEMS porte fièrement sa valeur "Diversité" en se mobilisant pour l'inclusion et l'égalité des chances et en luttant contre toutes formes de discrimination. Tous nos postes sont ouverts aux personnes en situation de handicap. Chez JEMS, nous croyons que les meilleurs candidats sont ceux qui partagent notre passion pour l'innovation et notre engagement envers l'excellence. Rejoignez notre équipe et soyez prêt à changer le jeu ! Référence de l'offre : nq7r56vfue

Nous recherchons pour un de nos clients basés en IDF, un pour une mission freelance (longue visibilité) Nature des prestations à réaliser et livrables attendusParticiper aux opérations d'alimentation et d'extraction de l'entrepôt de données en lien avec les équipes informatiques. Prise en charge des EDB métiers (étude, proposition de solution, recette et déploiement, accompagnement des équipes opérationnelles). Participer à l'offre de service actuelle en production (alimentation et mise à jour de rapports Power BI). Être force de proposition et participer aux actions en lien avec les différents chantiers. Participer aux diverses instances de pilotage et de suivi métier.

Almatek recherche pour l'un de ses clients, Un Référent technique - Intégration & Data sur Lyon Missions En tant que référent technique de la plateforme, vous êtes le garant de sa cohérence et de son bon fonctionnement au quotidien, en lien avec les équipes de développement, les éditeurs de logiciels et les équipes métier. Être l'interlocuteur technique de référence pour l'ensemble des parties prenantes du projet (équipes de développement internes et externes, éditeurs, architectes, support utilisateurs, équipes des systèmes connectés). Valider les choix techniques et garantir la cohérence de l'architecture globale de la plateforme. Animer les points techniques réguliers avec les équipes de développement/maintenance. Participer aux campagnes de tests lors des montées de version des outils. Cartographier et sécuriser les flux de données échangés avec les autres systèmes d'information ; piloter l'ouverture de nouvelles interfaces et les analyses d'impact. Planifier et sécuriser les opérations techniques (déploiements, montées de version) ; veiller au renouvellement des certificats, licences et comptes techniques ; suivre les vulnérabilités de sécurité et leur correction. Apporter une expertise sur les technologies de moteur de recherche d'entreprise (Elasticsearch, OpenSearch, Exalead ou équivalents), assurer une veille technologique et challenger les devis techniques proposés par les prestataires. Assurer le suivi et la résolution des incidents techniques dans des délais contractuels stricts. Documenter et capitaliser les procédures techniques pour garantir la continuité de service. Contribuer au reporting d'activité et à l'identification des risques projet. Construire et faire vivre une feuille de route technique (modernisation, gestion de la dette technique, plan de traitement des obsolescences). Compétences techniques recherchées Données : Oracle Senior SQL Senior ETL (outils d'intégration de données) Senior API REST Senior XML Senior JSON Senior Moteurs de recherche : Exalead Confirmé ElasticSearch / OpenSearch Confirmé Moteurs de recherche Big Data Senior Développement : Python Senior Java Confirmé Shell Confirmé Infrastructure & serveurs d'applications : Linux Senior Windows (serveur et poste de travail) Confirmé Tomcat Confirmé Apache Confirmé JBoss Confirmé OpenJDK Confirmé Packaging logiciel : MSI / InstallShield Confirmé Sécurité : SSL / TLS Senior SAML Senior LDAP Senior Signature de code Senior Architecture de systèmes d'information Intégration applicative Senior Architecture de flux de données Une connaissance d'une solution PLM du marché (type 3DExperience de Dassault Systèmes) est un plus apprécié, mais n'est pas éliminatoire. 5. Expériences valorisées Au moins 2 expériences d'intégration applicative sur des systèmes d'information de plus de 1 000 utilisateurs. Une expérience impliquant un moteur de recherche d'entreprise (Elasticsearch, OpenSearch, Exalead…). Une expérience de mise en place ou de pilotage d'interfaces applicatives. Une expérience de migration ou de transformation d'une plateforme existante.

Pour l'un de nos clients Niortais : nous cherchons un pilote SI / chef de projet sénior H/F pour accompagner le pilotage de plusieurs projets DATA. Le pilote sera sous la responsabilité d'un directeur de projet et du manager de l'entité. Responsabilités confiées : - Garantir la conduite ou la coordination de projets transverses, à forts enjeux ou présentant des risques importants, dans le respect des objectifs en terme de Qualité / Coût / Délais. - Garantir la performance des solutions déployées, leur conformité aux orientations de l'entreprise et aux besoins des commanditaires / utilisateurs. - Garantir le déploiement des projets et solutions, l'implémentation des changements et contribue à leur appropriation par les différents acteurs. - Elaborer, piloter et suivre le planning des projets Data. - Contribuer à l'efficacité permanente des outils / méthodes / processus / organisations, à leur adaptation à la stratégie et aux évolutions de l'entreprise. - Contribuer à l'optimisation et à la diffusion de bonnes pratiques dans la conduite de projets.

Contexte du poste Nous recherchons un Analytics Engineer / Data Engineer pour participer au développement d'une plateforme Data Analytics intégrée à une suite logicielle d'analyse technico-économique. En collaboration directe avec le Product Owner, vous serez responsable de l'implémentation des cas d'usage liés à la performance et aurez une vraie responsabilité sur la conception de l'architecture analytique et la modélisation des données. Missions principales Concevoir et faire évoluer l'architecture OLAP de la plateforme Modéliser les données selon les approches Kimball / étoile / flocon Développer et optimiser les transformations SQL et les modèles analytiques Concevoir les pipelines d'ingestion et d'orchestration avec Apache Airflow Développer des DAGs Python robustes, modulaires et maintenables Intégrer les données issues de bases OLTP vers l'environnement analytique Structurer les transformations avec dbt Implémenter et maintenir la couche sémantique avec Cube.js Concevoir les dashboards et métriques métiers sous Apache Superset Optimiser les performances, le cache et la gestion des droits d'accès / RLS Participer à l'industrialisation des développements avec Git et Docker

TEKsystems recherche pour l'un de ses clients grand compte un(e) Data ingénieur (H/F) Les tâches : Établir et sécuriser des connexions techniques robustes et évolutives avec les systèmes sources Corporate identifiés (ERP, Plateformes Financières, RH, ITSM etc.). Extraire et charger les données des domaines fonctionnels Corporate clés : finance, ressources humaines, référentiels, achats, etc. Concevoir et implémenter des pipelines d'ingestion automatisés fiables et performants, garantissant l'intégrité et la fraîcheur des données. Structurer et modéliser les données dans un entrepôt de données (Data Warehouse Snowflake) de manière logique, modulaire, réutilisable et optimisée pour l'analyse et la restitution. Mettre en place des mécanismes de gouvernance des données : gestion des métadonnées, logiques de rafraîchissement, suivi de la qualité des données et gestion des erreurs. Développer des vues et agrégats de données spécifiques aux besoins de restitution et d'analyse des différents départements Corporate. Documenter de manière exhaustive les pipelines d'ingestion, les modèles de données (logique et physique), les règles de transformation et les points de reprise pour assurer la maintenabilité et la transférabilité. Environnement technique Sources : Multiples systèmes Corporate (Systèmes Financiers, Plateformes Achats, Outils ITSM. - via APIs, exports ou connecteurs natifs). Destination : Snowflake(Data Warehouse Cloud). Orchestration : Airflow. Transformation : DBT Core / SQL, Python (Pandas/PySpark) ou équivalent. Modélisation : DrawIO, Lucidchart ou autre support outil libre. Visualisation / Restitution : Tableau. CI/CD / versioning : GitLab, GitHub. Documentation : Confluence, Jira, SharePoint.

Mission de l'équipe La mission s'inscrit au sein d'une équipe en charge de la gouvernance des données de risques et du déploiement du framework BCBS239, dans le cadre d'un programme stratégique de remédiation réglementaire lancé à la suite des recommandations de la Banque Centrale Européenne. L'objectif est de renforcer la maîtrise des processus d'agrégation et de reporting des données de risques, d'assurer la conformité aux exigences BCBS239 et d'accompagner la mise en œuvre opérationnelle de la gouvernance des données au sein des fonctions Risk. L'équipe pilote notamment la gouvernance des données critiques, l'organisation des filières de reporting, le déploiement des contrôles de données ainsi que la coordination avec les équipes en charge des systèmes de gestion de la donnée. 1. Gouvernance des données critiques L'équipe est responsable de l'identification, de la documentation et du suivi des Critical Data Elements (CDE) entrant dans le périmètre BCBS239. Les principales activités consistent à : Identifier et cartographier les données critiques. Documenter les données et assurer leur suivi dans le temps. Définir les indicateurs de risque (KRI) permettant de mesurer la qualité des données. Mettre en place des tableaux de bord de suivi de la qualité des données. 2. Structuration du catalogue de reporting L'équipe est responsable de la consolidation du catalogue de reporting de la filière ainsi que de son intégration dans les référentiels Groupe. Les travaux portent notamment sur : L'audit de l'existant. La création et la mise à jour d'un dashboard de synthèse des reportings. L'intégration du catalogue dans les outils Groupe afin d'améliorer la gouvernance et la collaboration entre les différentes équipes. 3. Mise en œuvre du framework BCBS239 L'équipe est responsable du déploiement opérationnel du dispositif de contrôle couvrant les processus d'agrégation et de reporting. Les activités comprennent notamment : La définition des rôles et responsabilités des différents acteurs. La mise en place des workflows opérationnels. Le déploiement des contrôles sur les métriques du Risk Appetite Statement (RAS) et du reporting COREP. La documentation des processus de production et des calendriers associés. La contribution à la mise en place de la traçabilité des données (Data Lineage) et des contrôles associés. 4. Pilotage du programme et préparation des audits L'équipe est responsable de coordonner les travaux du programme et de préparer les différents livrables attendus dans le cadre des revues internes et des audits réglementaires. Les travaux consistent notamment à : Préparer la roadmap des différents chantiers. Coordonner les parties prenantes. Finaliser l'Internal Assessment. Préparer les réponses aux recommandations d'audit. Accompagner les validations et sign off auprès des instances de gouvernance. Prestations demandées La mission interviendra principalement sur les axes suivants : Gouvernance des données critiques BCBS239. Déploiement opérationnel du framework de contrôle. Structuration du catalogue de reporting. Pilotage des travaux de conformité réglementaire. En termes de responsabilités principales, la mission devra notamment : Préparer et piloter la roadmap des travaux avec les différentes parties prenantes. Identifier, documenter et assurer le monitoring des Critical Data Elements (CDE). Définir les KRI de qualité de données et produire les tableaux de bord associés. Réaliser l'inventaire du catalogue de reporting et contribuer à son intégration dans les outils Groupe. Concevoir et mettre en œuvre le plan de contrôle des processus d'agrégation et de reporting. Documenter les métriques du Risk Appetite Statement (RAS) et du reporting COREP. Contribuer à la définition des rôles, responsabilités et processus de gouvernance. Participer aux travaux de Data Lineage et aux contrôles associés. Préparer les livrables nécessaires aux audits et aux comités de validation.