Trouvez votre prochaine mission ou futur job IT.

Missions Mise en place de pipelines d'ingestion des données cliniques depuis les systèmes on-premise vers GCP (Python, GCS, BigQuery, Argo Workflows, Docker, GKE). Transformation des données via dbt selon les modèles métiers définis. Gestion de l'infrastructure cloud de la plateforme data (création des ressources, gestion des accès) avec Terraform. Orchestration et automatisation des workflows de données sur GKE via Argo Workflows. Développement du backend d'un portail utilisateur pour l'accès aux services de la plateforme (Flask). Création d'un connecteur entre GCP et l'outil de dictionnaire des données pour la remontée et la restitution des métadonnées (Python, DataGalaxy). Développement, maintenance des chaînes CI/CD (Git, Gitlab CI/CD). Mise en place de la supervision et du monitoring des pipelines de données. Rédaction de la documentation technique liée aux développements réalisés. Environnement techniqueGCP, GKE, Argo Workflows, BigQuery, Cloud Run, Cloud Functions, Pub/Sub, Cloud Storage Python, Terraform, Docker, Kubernetes, SQL, Git, Gitlab CI/CD, Bash

En lien avec l'équipe de production applicative / DevOps, vous serez en charge de la mise en œuvre technique des demandes métier dans le cadre du projet DataOps. Vous interviendrez sur l'ingestion, la préparation et la transformation des données ainsi que sur l'évolution des pipelines au sein de l'environnement GCP. Votre rôle Ingestion et transformation des données · Mettre en œuvre de nouvelles ingestions de données dans Cloud Storage et BigQuery · Développer les traitements de préparation et de transformation des données · Développer et maintenir les traitements en Python et SQL, notamment avec Pandas et/ou Dask · Intervenir sur les traitements distribués s'appuyant sur Spark lorsque nécessaire Développement et évolution des pipelines · Maintenir et faire évoluer les outils de gestion des pipelines de données · Développer et maintenir les scripts Bash nécessaires à leur exécution · Assurer le suivi et l'ordonnancement des traitements avec les outils du périmètre, notamment Control-M · Analyser et résoudre les problématiques techniques liés aux traitements et aux pipelines Evolution de la plateforme Data · Identifier les besoins d'évolution de la plateforme liés aux traitements et pipelines de données · Rédiger les spécifications techniques nécessaires aux évolutions mises en œuvre · Formaliser et transmettre à l'équipe DevOps les demandes relatives aux évolutions de la plateforme ________

Bonjour, Pour le compte de l'un de mes clients dans le secteur du luxe, je suis à recherche d'un Data App Engineer - Databricks / Python en Pré-embauche. Dans le cadre d'un départ à venir dans les équipes de la Data Factory, nous recherchons un(e) consultant(e) Data App Engineer confirmé, disposant d'une expertise avérée sur Databricks Apps, en modélisation data, et en réalisation d'interfaces. Le profil attendu est un data “full stack”, maîtrisant les concepts d'ingénierie, d'architecture et d'UX/UI, capable de concevoir, construire et maintenir des applications de collecte et de gestion de données, en interaction avec les chaînes analytiques. Le candidat devra être immédiatement opérationnel, justifier d'au moins 2 années d'expérience sur des projets Data App, et démontrer une excellente maîtrise de l'écosystème Databricks, ainsi que des frameworks orientés Data Apps (Dash et idéalement Node.js). Objectifs de la mission : Concevoir et développer des Data Apps, orientées saisie et gouvernance des données référentielles Garantir l'intégration fluide des applications avec les couches analytiques Modéliser des structures data robustes, performantes et sécurisées Industrialiser les flux et orchestrations nécessaires au cycle de vie des données Assurer un haut niveau de qualité UX/UI afin de favoriser l'adoption par les équipes métiers Mettre en place une démarche d'ingénierie pérenne : sécurité, logging, observabilité, CI/CD Périmètre d'intervention : Conception et développement d'applications Databricks Apps (front + logique métier + data pipelines) Création de modèles de données durables, optimisés et gouvernés sous Unity Catalog Mise en place et optimisation de la sécurité Lakehouse, notamment via RLS Conception des flux d'ingestion / exposition / synchronisation entre le Lakehouse (couche analytique) et Lakebase (couche applicative) : synced tables, CDF Développement Python avancé : data processing, API internes, logique applicative Participation aux rituels du delivery et contribution aux bonnes pratiques d'ingénierie Documentation des architectures, process et guidelines Support à l'intégration, aux tests et aux mises en production

Dans le cadre du renforcement d'une équipe de Gestion Courante Décisionnelle / Datalake, notre client recherche un Data Engineer / Développeur Big Data Spark Scala expérimenté, capable d'intervenir sur des traitements critiques en production et de contribuer au maintien de la qualité de service. L'environnement repose sur une architecture Big Data collectant les données de plusieurs back-offices, avec un Datalake et une alimentation d'un Datawarehouse sur environnement Exadata. Vos missionsVous interviendrez principalement sur le RUN et la maintenance applicative des traitements décisionnels : Assurer le suivi quotidien des traitements Spark / Scala Analyser et corriger les incidents applicatifs et fonctionnels Réaliser, lorsque nécessaire, les reprises de données associées aux incidents Développer et mettre en œuvre les évolutions confiées Réaliser les tests des corrections et nouveaux développements Participer aux mises en production Maintenir à jour la documentation technique et fonctionnelle Mettre à jour les outils de suivi de l'équipe Rendre compte de l'avancement et des incidents au chef de projet

Nous recherchons un(e) Tech Lead Data Engineer capable de trouver des solutions innovantes et robustes à l'ensemble des problématiques Data. Vous aurez la charge de : • Assurer la mise en œuvre de l'accès, du référencement et de la qualité de la donnée • Assurer l'industrialisation, la supervision et l'intégration des solutions • Rédiger les normes de développement • Participer à la rédaction du manuel d'exploitation En tant que Tech Lead, vous savez : • Vous présenter et promouvoir des architectures data face au client • Identifier et comprendre les besoins métiers • Former, encadrer et faire évoluer les consultants juniors • Participer à la réponse aux appels d'offres (avant-vente) Référence de l'offre : dedbg6qwsh

Notre client dans le secteur Assurance recherche un/une Data Engineer H/F Description de la mission : Missions principales • Prendre en charge la responsabilité des produits data de pilotage et de suivi des services GenIA déployés • Être l'interlocuteur des métiers pour recueillir et formaliser leurs besoins : catalogue d'indicateurs, reportings attendus, définition des KPI • Concevoir, industrialiser et fiabiliser les indicateurs de pilotage (usage, performance, qualité, ROI des services GenIA…) • Structurer, modéliser et documenter les données nécessaires au pilotage (sources, flux, data flow) • Construire et maintenir les dashboards de suivi (Streamlit) • Mettre en œuvre et fiabiliser les pipelines de données associés (collecte, transformation, contrôle qualité) • Contribuer à la montée en maturité data de l'équipe : bonnes pratiques, documentation, capitalisation des connaissances Passage de connaissance En début de mission, un passage de connaissance sera organisé avec le sachant actuel afin d'assurer la continuité et la bonne appropriation du périmètre existant. Ce passage de connaissance portera notamment sur les services suivants : • Genflux • Genprest • Genindemn • Dispositif de contrôle • (liste non exhaustive, à compléter selon le périmètre des services GenIA déployés au moment du démarrage de la mission) Livrables attendus • Catalogue d'indicateurs de pilotage des services GenIA, validé avec les métiers • Dashboards de suivi opérationnels • Pipelines de données documentés et industrialisés • Documentation de la donnée (sources, modèle, flux) Profil recherché Formation Bac+5 en informatique, data science, data engineering ou équivalent, avec une expérience confirmée sur un poste de Data Analyst / Data Engineer (5 ans minimum), idéalement acquise dans un environnement assurantiel, bancaire ou réglementé. Compétences techniques • Excellente maîtrise de SQL et Python • Expérience en modélisation de données et architectures data (modèle en étoile, flocon, data vault…) • Connaissance des environnements data modernes : Snowflake, Azure Storage, SQL Server • Pratique de DBT, Airflow / Dagster, Git, Gitlab, Linux, Docker • Connaissance d'un outil de dataviz, idéalement Qlik Sense ou Streamlit • Une première expérience sur des cas d'usage IA générative serait un plus Qualités personnelles • Forte aisance relationnelle : capacité à interagir avec des interlocuteurs métiers non techniques et à vulgariser les enjeux data • Autonomie, rigueur et sens de l'organisation • Appétence pour les environnements structurés en transformation Modalités de la mission Durée de la mission : 3 mois, reconductible Télétravail: 2 jours maximum par semaine Passage de connaissance : Prévu en début de mission avec le sachant actuel (Genflux, Genprest, Genindemn, dispositif de contrôle…) Date de démarrage souhaitée : ASAP Lieu de mission :Lyon Compétences / Qualités indispensables : python, sql Compétences / Qualités qui seraient un + : IA Informations concernant le télétravail : Oui — 2 jours/semaine

Contexte La mission vient dans le contexte d'un projet de gestion (Build + Run) d'une plateforme data sur GCP pour les données de l'entreprise. Interlocuteurs : Directeur Data, Data Analysts, Data Engineers, Data Scientists, Product Owners, Équipe Métier. Missions Mise en place de pipelines d'ingestion des données cliniques depuis les systèmes on-premise vers GCP (Python, GCS, BigQuery, Argo Workflows, Docker, GKE). Transformation des données via dbt selon les modèles métiers définis. Gestion de l'infrastructure cloud de la plateforme data (création des ressources, gestion des accès) avec Terraform. Orchestration et automatisation des workflows de données sur GKE via Argo Workflows. Développement du backend d'un portail utilisateur pour l'accès aux services de la plateforme (Flask). Création d'un connecteur entre GCP et l'outil de dictionnaire des données pour la remontée et la restitution des métadonnées (Python, DataGalaxy). Développement, maintenance des chaînes CI/CD (Git, Gitlab CI/CD). Mise en place de la supervision et du monitoring des pipelines de données. Rédaction de la documentation technique liée aux développements réalisés.

Nous recherchons un(e) Data Engineer capable de trouver des solutions innovantes et robustes à l'ensemble des problématiques Data. Vous aurez la charge de : • Participer à la conception et réalisation d'une solution Data depuis l'acquisition jusqu'à l'exploitation de la donnée en accompagnant la réflexion des directions métiers • Identifier, collecter et intégrer les données nécessaires à la résolution de problématiques métier et opérationnelles • Garantir la qualité des données en mettant en place les outils de mesure et de suivi adéquats en appliquant les règles de Data Gouvernance et de Data Management • Transcrire des besoins métier en règles de gestion data • Industrialiser le déploiement de vos réalisations à travers l'implémentation de tests unitaires, d'intégration et de non-régression Référence de l'offre : w5xvrgqwfy

La Tribu DATA (DAT) construit et développe des applications sur la base de puissantes plates-formes DATA à des fins d'usages variés servant toutes les directions métier de la banque. Pour répondre à ces usages, DAT est au cœur de la stratégie datacentric, et intervient aussi bien au niveau de l'architecture Data, sur les dernières technologies data, Big data, IA, Teradata, SAS, DMP, Oracle ainsi que sur les solutions analytiques et de datavizualisation. La mission consiste à assurer les fonctions suivantes au sein de la Squad Socles Data de la tribu DAT: 1. Partie étude : Prendre connaissance de l'existant des traitements ETL d'un domaine particulier. L'analyser pour en définir la cible sur TERADATA. Définir les lots de réalisation, estimer leur coût et planning. 2. Partie réalisation : Participer à la phase de conception des solutions cibles. Réaliser les développements et tests sous SQL Teradata. Réaliser les doubles RUN et leurs bilans pour préparer les MEP. Assurer le RUN des traitements post MEP pendant la phase de VSR. Proposer des solutions d'optimisation des traitements et les mettre en œuvre. Les compétences suivantes devront être maîtrisées : • Mode de chargement dans l'entrepôt (ETL) : BTEQ • Teradata • CONTROL-M • Environnement UNIX ( répertoires principaux, Usage & Entrepôt ) • SQL sur SGBD relationnel (Teradata) • TPT • Connaissance de Datastage • Outils collaboratifs et documentaires : GIT, Jira, Confluence, MEGA, Zeenea

Concevoir, développer et maintenir des pipelines de données robustes et performants. Développer et industrialiser les transformations de données avec DBT. Concevoir et optimiser les modèles de données dans BigQuery. Intégrer différentes sources de données au sein de l'écosystème Google Cloud Platform. Garantir la qualité, la fiabilité et la disponibilité des données. Optimiser les performances des traitements et des requêtes SQL. Mettre en place des tests et contrôles de qualité des données. Participer à l'automatisation des déploiements et aux pratiques CI/CD / DataOps. Contribuer à la documentation technique et au respect des standards Data. Collaborer avec les Data Analysts, Data Scientists, équipes métiers et équipes Cloud/DevOps. Participer aux problématiques de gouvernance, sécurité et traçabilité des données propres au secteur bancaire.

Data Engineer GCPLe consultant idéal devra posséder les compétences suivantes : • Excellente maîtrise de la plateforme GCP, et autres outils de notre stack technique : BigQuery, cloud storage, SQL, Python orienté objet, Pandas et /ou Dask, bash scripting, GIT • Connaissances et expériences avec des outils complémentaires suivants seraient des atouts appréciables : Cloud functions, SAS, Alteryx, XLD/XLR, ControlM, Hadoop, Spark • Maîtrise de l'anglais, tant à l'écrit qu'à l'oral, pour faciliter les échanges avec nos interlocuteurs basés à Porto, qui représentent une part importante de notre équipe IT. • Expérience dans des environnements agiles, en particulier avec la méthodologie SCRUM. • Capacité à rédiger des spécifications techniques claires et précises. • Dynamisme, excellent relationnel et capacité à travailler en équipe. • Force de proposition et curiosité technique pour explorer de nouvelles solutions et technologies. Au sein du département IT de la DSI Groupe, l'équipe data a pour vocation de fournir aux différentes entités, l'ensemble des applications nécessaires à leur fonctionnement. Nous recherchons un profil Data Engineer GCP qui sera en charge, en lien avec l'équipe de production applicative / devops, de mettre en œuvre techniquement les demandes métier sur le projet DatOps. Passionné par le développement et le traitement des données, capable de s'adapter à un environnement dynamique et en constante évolution, le prestataire doit faire preuve d'autonomie, d'initiative et d'une forte capacité d'analyse pour résoudre des problèmes complexes. Les tâches suivantes seront confiées au consultant : • Mettre en œuvre de nouvelles ingestions de données, data prep/transformation • Maintenir et faire évoluer nos outils de gestion des pipelines de données => quel outil utilisé ?? • Adresser à l'équipe devops les demandes relatives aux évolutions de la plateforme Expected skillsSkillsSkill level HADOOP Confirmed SQL Confirmed GCP Confirmed Google Cloud Storage Advanced Spark Advanced BIGQUERY Confirmed Pandas Advanced GIT Advanced Python Advanced

La mission consiste à intervenir sur un projet stratégique de gestion des risques climatiques et physiques, visant à ingérer, agréger, traiter et exposer des données issues de sources multiples afin d'alimenter des reportings métiers liés à la surveillance du risque de crédit. Le consultant participera à la conception, au développement et à l'intégration de solutions Data reposant sur Python, Spark et Google Cloud Platform (GCP), notamment BigQuery, Dataproc, Composer, Cloud Functions, Cloud Run Jobs et GCS. Il contribuera également à l'industrialisation et au maintien en conditions opérationnelles des traitements, à la qualité et à la sécurité des données, ainsi qu'aux activités DevOps et d'automatisation à travers XLD, Terraform et Jenkins.

Description et livrables de la prestation Le Data Engineer est un développeur au sein de l'équipe Engineering Open Big Data du Département Guilde Data, qui regroupe l'ensemble des expertises technologiques liées à l'ingénierie de la donnée, de l'automatisation et à l'exploitation des modèles de Machine Learning. Votre rôle et vos missions : Vous aurez pour missions principales de développer les projets Big Data demandés par le métier, et notamment : • Passer de la donnée brute à de la donnée exploitable, exposée sous forme de tables requêtables dans le Datalake • Consolider ces données au fur et à mesure de leur alimentation récurrente dans le Datalake • Les exploiter pour atteindre la finalité business (exposition de Business View, réintégration des résultats dans le SI, service de scoring, …) • De mettre en place et de garantir le respect dans la durée d'un processus qualité sur l'ensemble du cycle de DEV (documents, tests unitaires / intégration / fonctionnels, commentaires, versionning, etc.) • Accompagner les Data Engineers sur son périmètre pour garantir la qualité des livrables

Nous recherchons un(e) Tech Lead Data Engineer capable de trouver des solutions innovantes et robustes à l'ensemble des problématiques Data. Vous aurez la charge de : • Assurer la mise en œuvre de l'accès, du référencement et de la qualité de la donnée • Assurer l'industrialisation, la supervision et l'intégration des solutions • Rédiger les normes de développement • Participer à la rédaction du manuel d'exploitation En tant que Tech Lead, vous savez : • Vous présenter et promouvoir des architectures data face au client • Identifier et comprendre les besoins métiers • Former, encadrer et faire évoluer les consultants juniors • Participer à la réponse aux appels d'offres (avant-vente) Référence de l'offre : efielz010x

INGENIEUR DATA BI GENIO / SQL / BIG QUERY / TERADATA / GCP nous recherchons un Data Engineer entre 3 et 7 ans d'expérience qui aura la capacité de gérer à la fois les aspects MCO/TMA mais également la partie projets pour les différentes directions du groupe en collaboration avec le reste de l'équipe. À la suite d'une passation avec notre centre de service, il devra également être en mesure d'innover et d'améliorer les processus existants pour perfectionner l'efficience de l'équipe au quotidien dans ses différentes tâches. DESCRIPTION DE LA MISSION • Participe à l'analyse du besoin avec la supervision du PPO ou Manager et à la conception du modèle de données permettant de répondre aux enjeux. • Utilise l'analyse des données pour fournir des éléments significatifs et éclairer la conception/mise en œuvre des projets • Conçois, développe et maintien les pipelines de données pour l'acquisition, la transformation, le stockage et la mise à disposition des données. • Optimise les performances des développements pour assurer une disponibilité et une fiabilité maximale • Identifie et résout les goulots d'étranglement et les problèmes de performances dans les flux de données • Met en place des processus et des contrôles pour garantir la qualité des données • Conçoit et met en œuvre des systèmes d'alerte, de monitoring et de reprise automatique efficaces. • Réalise la recette technique et anime la recette fonctionnelle avec les utilisateurs • Rédaction des documents associés au projet (Spécification Fonctionnelles, Spécifications Techniques, Cahier de recette Technique, Document d'exploitation) • Être force de proposition sur l'amélioration de notre stack Data • Faire le reporting d'avancement des travaux • Support au déploiement • Assure la maintenance corrective ou évolutive • S'assure de la cohérence des livrables avec les règles et bonnes pratiques définies au sein de l'équipe ENVIRONNEMENT TECHNIQUE L'environnement Data dans le cadre de cette mission est actuellement constitué principalement d'une base de données Teradata (Cloud) ainsi qu'un environnement BigQuery. • Langages/Framework : SQL, BigQuery, Python, Java, Shell • Outils : OpenText GENIO, Talend • Base de données : Teradata, BigQuery, SQL Server, IBM DB2 PLANIFICATION ET LOCALISATION Démarrage ASAP / PARIS

Nous recherchons pour un de nos clients un Data Product Manager Senior pour piloter les études et cadrages liés au périmètre Data & Visualization. La mission consiste à définir la stratégie cible Data & Reporting, à analyser les impacts de la migration de SAP ECC vers SAP S/4HANA et à accompagner les métiers Missions : Vous serez notamment chargé(e) de : Définir le futur modèle Data & Reporting basé sur SAP S/4HANA ; Recueillir et analyser les besoins des métiers et des équipes européennes ; Évaluer les impacts de la migration sur les systèmes legacy, les flux de données, les reportings et les modèles existants ; Identifier les indicateurs, usages analytiques et reportings prioritaires ; Concevoir et structurer un portefeuille de Data Products ; Définir les modèles de données et les Business Layers ; Documenter l'architecture fonctionnelle cible, les sources, les règles de gestion et les transformations ; Analyser le cycle de vie de la donnée, de la source jusqu'à la visualisation ; Garantir l'alignement avec les standards Data, BI, architecture et gouvernance ; Organiser et animer des ateliers avec les métiers, les équipes SAP, Data, BI et Architecture ; Coordonner les contributions des Data Engineers, BI Engineers, Technical Architects et autres parties prenantes ; Faciliter les arbitrages fonctionnels et techniques ; Identifier les opportunités de rationalisation, d'industrialisation et de valorisation de la donnée ; Préparer le périmètre, le budget, le planning, les prérequis et la trajectoire de mise en œuvre ; Évaluer la valeur et les bénéfices attendus des solutions proposées ; Identifier les dépendances, risques et contraintes du programme.