Trouvez votre prochaine mission ou futur job IT.

Contexte de la mission Au sein de la DSI France, le département SI METIER & DATA souhaite renforcer sa capacitée à réaliser des projets Data. Au sein de l'équipe Data et de l'équipe projet, le Data Engineer réalise les intégrations de données, les traitements et les reportings dans PALANTIR Foundry. Il propose et recherche les meilleurs solutions techniques en collaboration avec l'équipe projet et participe au suivi quotidien des flux de données. Le projet concerne en particulier le traitement de données de consommations IT. Objectifs et livrables Comprendre les besoins métier et faire les investigations nécessaires pour une réalisation optimale Concevoir et réaliser les développements et configurations dans Palantir Documenter les réalisation, présenter le résultat et participer aux recettes Intégrer l'équipe BI, travailler en collaboration avec tous les membres et participer à la communité technique. Participer au suivi quotidien des applications Pour cette mission, l'expertise et les compétences attendues sont : · Manipulation et traitement des données : Python · Création de dashboard et fonction d'affichage (JavaScript/TypeScript) · Cloud, Base de données, stockage, automatisation · Framework SPARK · Manipulation d'APIs, etc... · Outil de versionning (GIT) · Comprendre la structure des bases de données mises en place (architecture en étoile, relation 1-N ou N-N..) · Methode Agile / Jira · Connaissance de PALANTIR serait un plus · Anglais : niveau professionnel · Outils bureautique : intermédiaire ou expert (faire un CR, une présentation,…) Compétences demandéesCompétencesNiveau de compétence JIRA / Agile Confirmé Data Engineering Expert AI-assisted development Confirmé Python/pyspark Expert LanguesNiveau de langue Anglais Courant

Dans le cadre du renforcement d'une équipe IT spécialisée dans l'analyse des marchés de l'énergie, nous recherchons un Senior Data Engineer / Software Engineer pour intervenir sur des applications métiers et une plateforme Data stratégique. Vous participerez au développement et à l'évolution de la plateforme Data, ainsi qu'à la collecte, l'ingestion, le traitement, la transformation et la restitution des données. Vous contribuerez également à la conception et au développement d'outils d'aide à la décision à destination des équipes métier. La mission comprend le développement de solutions en Python sur AWS, l'optimisation des performances et des coûts, ainsi que la maintenance corrective et évolutive des applications. Vous veillerez à la qualité des livrables et accompagnerez les utilisateurs dans un environnement exigeant et international.

ContexteDans le cadre de l'évolution et de la modernisation d'une Data Platform, nous recherchons un(e) Staff Data Platform Engineer pour contribuer à l'excellence engineering de l'écosystème data. Au sein d'une organisation Data Mesh mature, vous aurez un rôle transverse de facilitateur, d'accélérateur et de référent technique auprès des différentes équipes Data Engineering. Votre mission sera de faire le lien entre les capacités de la plateforme centrale et les besoins opérationnels des équipes produit, avec un fort enjeu autour de la Developer Experience (DevEx), de la standardisation des pratiques et de l'accélération de la mise en production des produits data. Vos missionsDeveloper Experience & Data EngineeringOptimiser le cycle de vie des pipelines Data, du développement local jusqu'à la production. Concevoir et standardiser des paved paths permettant aux équipes Data de développer et déployer plus efficacement. Développer et partager des composants, templates et outils facilitant le travail des Data Engineers. Contribuer à la mise en place de standards autour du CI/CD, des tests, de l'observabilité et de la qualité. Promouvoir les bonnes pratiques d'ingénierie logicielle au sein de la communauté Data. Innovation & IAIntégrer les outils d'IA générative et de développement assisté dans les pratiques quotidiennes des Data Engineers. Identifier et développer des cas d'usage permettant d'améliorer la productivité des équipes. Participer à la construction d'un AI Toolkit dédié aux besoins du Data Engineering. Accompagner l'évolution des pratiques vers une ingénierie Data augmentée par l'IA. Architecture & Excellence techniqueConcevoir des frameworks et patterns favorisant la qualité, la maintenabilité et la fiabilité des pipelines. Mettre en place des mécanismes de feedback loop, observabilité, data quality et data contracts. Contribuer à l'évolution de l'architecture Data et à sa modernisation progressive. Challenger les pratiques et architectures existantes afin d'identifier les axes d'amélioration. Accompagner la transition progressive vers des architectures Open Lakehouse et des modèles Data modernes. Prendre en compte les enjeux de FinOps, sécurité et RGPD by design. Gouvernance & accompagnementÊtre le représentant des besoins de la communauté Data Engineering auprès de l'équipe Platform. Faciliter l'alignement entre les pratiques locales et les standards d'ingénierie globaux. Conseiller les équipes responsables du socle technique de la plateforme. Favoriser le partage de connaissances et la mutualisation des initiatives au sein de la communauté Data. Travailler avec des équipes internationales dans un environnement matriciel. Environnement techniqueData Engineering / Data Platform Data Mesh GCP / BigQuery Data Vault / Star Schema CI/CD DataOps Data Quality Data Contracts Observabilité API / CLI tooling YAML Automatisation GenAI / Copilots / AI Engineering Open Lakehouse FinOps GDPR / Privacy by Design

A LIRE ATTENTIVEMENT AVANT DE POSTULER ⬇ 🏠 2 jours de télétravail / semaine - 📍 Lyon (07) - 🛠 Expérience de 3 ans minimum Vous aimez autant comprendre ce que fait un pipeline que travailler sur la techno qui le fait tourner ? Nous recherchons un·e Data Engineer / Développeur Big Data Spark pour rejoindre un projet qui offre une trajectoire technique intéressante : moderniser progressivement un SI Data existant, puis participer à sa migration vers Databricks dans le cloud. L'enjeu n'est donc pas de repartir d'une feuille blanche. Vous travaillerez d'abord sur l'existant, comprendrez les flux et leurs enjeux métier, puis contribuerez à construire leur cible Big Data et Cloud. Votre terrain de jeu : moderniser l'existant avant de construire la cible Cloud Votre mission s'articulera autour de deux grandes étapes. 1/ Migrer progressivement les traitements vers Spark Vous commencerez par vous approprier les flux de données existants et les processus métier associés. Concrètement, vous allez : - migrer des traitements Informatica et PL/SQL vers Spark en Java - concevoir, développer et maintenir des pipelines de données - optimiser les traitements existants en travaillant notamment sur leur performance et leur robustesse - assurer la maintenance corrective et évolutive des traitements SQL / PL-SQL - intervenir sur le BUILD comme sur le RUN, afin de comprendre le fonctionnement des traitements de bout en bout - veiller à la qualité et à la fiabilité des données produites. L'objectif : faire évoluer progressivement le patrimoine existant vers une architecture Big Data plus moderne, sans perdre la connaissance métier portée par les traitements historiques. 2/ Participer à la migration vers Databricks Une fois cette première étape engagée, vous participerez à un projet stratégique de migration vers le Cloud avec Databricks. Vous contribuerez notamment à : - concevoir les futurs pipelines de données sous Databricks - participer aux choix de conception et d'architecture - industrialiser les nouveaux traitements - faire évoluer les pratiques de développement et d'exploitation autour de cette nouvelle plateforme. Vous aurez donc l'occasion de travailler sur l'existant et sa transformation, plutôt que d'intervenir uniquement sur la maintenance ou uniquement sur la cible.

L'équipe travaille sur des données issues de scans d'infrastructure réalisés avec BMC Discovery. Ces données permettent de recenser et de cartographier les composants techniques du système d'information, notamment les serveurs, les machines virtuelles, les applications, les équipements réseau et le stockage. L'objectif est de transformer ces données brutes en produits data fiables et exploitables par différentes équipes IT, notamment les équipes de production, d'infrastructure, de sécurité et de conformité. MissionsDans le cadre de cette mission, vous interviendrez sur : La conception et le développement de produits data à partir de données d'infrastructure. La création de vues SQL, de modèles de données et de pipelines sur Starburst, basé sur Trino. La transformation de données techniques en jeux de données exploitables par les équipes IT. La mise à disposition de vues et de datasets pour des usages d'inventaire, de cartographie applicative, de suivi de parc et de conformité. L'optimisation des requêtes et des performances sur Starburst. La documentation des modèles, des règles de gestion et des produits data. Les échanges avec les équipes métiers IT afin de comprendre leurs besoins et de les traduire en solutions data. La montée en compétence sur BMC Discovery, dont la logique de collecte et de modélisation sera présentée en interne.

A LIRE ATTENTIVEMENT AVANT DE POSTULER ⬇ 🏠 2 jours de télétravail / semaine - 📍 Lyon (07) - 🛠 Expérience de 3 ans minimum Vous aimez autant comprendre ce que fait un pipeline que travailler sur la techno qui le fait tourner ? Nous recherchons un·e Data Engineer / Développeur Big Data Spark pour rejoindre un projet qui offre une trajectoire technique intéressante : moderniser progressivement un SI Data existant, puis participer à sa migration vers Databricks dans le cloud. L'enjeu n'est donc pas de repartir d'une feuille blanche. Vous travaillerez d'abord sur l'existant, comprendrez les flux et leurs enjeux métier, puis contribuerez à construire leur cible Big Data et Cloud. Votre terrain de jeu : moderniser l'existant avant de construire la cible Cloud Votre mission s'articulera autour de deux grandes étapes. 1/ Migrer progressivement les traitements vers Spark Vous commencerez par vous approprier les flux de données existants et les processus métier associés. Concrètement, vous allez : - migrer des traitements Informatica et PL/SQL vers Spark en Java - concevoir, développer et maintenir des pipelines de données - optimiser les traitements existants en travaillant notamment sur leur performance et leur robustesse - assurer la maintenance corrective et évolutive des traitements SQL / PL-SQL - intervenir sur le BUILD comme sur le RUN, afin de comprendre le fonctionnement des traitements de bout en bout - veiller à la qualité et à la fiabilité des données produites. L'objectif : faire évoluer progressivement le patrimoine existant vers une architecture Big Data plus moderne, sans perdre la connaissance métier portée par les traitements historiques. 2/ Participer à la migration vers Databricks Une fois cette première étape engagée, vous participerez à un projet stratégique de migration vers le Cloud avec Databricks. Vous contribuerez notamment à : - concevoir les futurs pipelines de données sous Databricks - participer aux choix de conception et d'architecture - industrialiser les nouveaux traitements - faire évoluer les pratiques de développement et d'exploitation autour de cette nouvelle plateforme. Vous aurez donc l'occasion de travailler sur l'existant et sa transformation, plutôt que d'intervenir uniquement sur la maintenance ou uniquement sur la cible.

Dans le cadre de l'évolution d'une Data Platform Cloud déjà en production, nous recherchons un Data Engineer AWS confirmé/senior. La mission s'inscrit dans un environnement Data à forte volumétrie et porte principalement sur l'évolution de la plateforme, l'industrialisation des pipelines de données et l'intégration de solutions AWS. Vos missionsParticiper à la définition et à l'évolution de l'architecture Data Platform / Lakehouse Concevoir, développer et industrialiser des pipelines de données Développer des traitements PySpark sur AWS Glue Intégrer les services Data AWS, notamment S3 Participer au développement d'API en Java / Spring Boot Contribuer à la mise en place d'un environnement Data Lab Mettre en œuvre et améliorer les processus CI/CD Analyser les besoins fonctionnels et les traduire en solutions techniques Garantir la maintenabilité et la sécurité des solutions Participer aux mises en production Assurer le support de production en cas d'incident majeur Contribuer aux bonnes pratiques de développement, de tests et d'industrialisation

Dans le cadre du renforcement des équipes Data, vous interviendrez en tant que Data Engineer / Data Architect Senior afin de concevoir, faire évoluer et industrialiser des architectures et plateformes de données robustes, performantes et évolutives. Vous participerez à la définition des architectures techniques, à la conception et au développement des flux de données, à leur intégration et à leur optimisation, tout en garantissant la qualité, la disponibilité et la fiabilité des données. Vous accompagnerez également les équipes dans la mise en œuvre des bonnes pratiques d'architecture et d'ingénierie Data, contribuerez aux choix technologiques et veillerez à la maintenabilité, à la sécurité et à la performance des solutions déployées.

Notre client dans le secteur Transport et logistique recherche un/une Data Engineer BI / Reporting H/F Description de la mission : Contexte La mission s'inscrit au sein d'une équipe projet rattachée à une ligne de produit Data. Elle porte sur le développement de reporting pour un nouveau portail de suivi des prestations de service, dans un contexte plus large de migration Data Cloud. La prestation comprend également la maintenance d'un patrimoine de reporting existant sur l'écosystème SAP BI. Mission Le Data Engineer intervient sur des sujets de reporting, de préparation de données et de maintenance de traitements décisionnels. Il contribue à l'analyse des besoins métier, à la conception des solutions de restitution, à la qualité des données, aux tests et aux mises en production, tout en assurant un support opérationnel et un reporting d'activité dans un cadre agile. Principales responsabilités Analyser les besoins métier, étudier les impacts et chiffrer les développements Modéliser et préparer les données pour des usages décisionnels Concevoir et maintenir les rapports Power BI Mettre en œuvre et suivre les contrôles de qualité de données Réaliser les tests, les recettes et les mises en production Produire la documentation fonctionnelle et technique Reprendre les historiques de données depuis SAP vers Databricks Maintenir les pipelines Databricks en SQL, Python et PySpark Assurer le support, l'analyse et la résolution d'incidents Maintenir les traitements SAP BW/HANA et les restitutions SAP BusinessObjects BI4, sur une part minoritaire de l'activité Reporter son activité auprès de l'équipe DSI dans le cadre des instances Agile / Scrum Environnement technique BI / Reporting : Power BI, SAP BW/HANA, SAP BusinessObjects BI4, WEBI Data Engineering : Databricks, SQL, Python, PySpark, Kafka Cloud / Plateforme : Azure, Fabric, Power Platform Outils / Méthodes : Jira, Confluence, Agile, Scrum, SAFe, FinOps Livrables attendus Analyses de besoins, études d'impact et chiffrages Modèles de données préparés pour les usages décisionnels Rapports Power BI conçus et maintenus Contrôles de qualité de données mis en place et suivis Jeux de tests, recettes et mises en production réalisés Documentation fonctionnelle et technique Reprises d'historique depuis SAP vers Databricks Pipelines Databricks maintenus et fiabilisés Support et résolution d'incidents Profil recherché Expérience Profil expert avec plus de 7 ans d'expérience Capacité à assurer la mission en autonomie dès la prise de poste Expérience significative permettant d'intervenir efficacement sans accompagnement rapproché Compétences techniques Maîtrise de SAP BW/HANA, SAP BusinessObjects BI4, WebI et SQL Conception et maintenance de rapports Power BI Modélisation et préparation de données pour le décisionnel Maintenance de pipelines Databricks en SQL, Python et PySpark Pratique des outils Agile, Jira et Confluence La certification Power BI constitue un atout Des connaissances en consommation de topics Kafka, FinOps, Azure, Fabric et Power Platform sont appréciées La connaissance de Scrum et SAFe est appréciée La connaissance des processus de gestion de prestations de services et du suivi d'exécution de contrats et devis est appréciée Compétences personnelles Autonomie Sens du service Rigueur Esprit d'analyse Capacité d'investigation Communication claire Esprit d'équipe et coopération transverse Capacité à s'approprier rapidement un patrimoine décisionnel existant et des processus métiers complexes Capacité à être force de proposition et proactif sur les aspects techniques et fonctionnels Capacité à travailler avec des interlocuteurs métiers et techniques Capacité à documenter et transmettre les connaissances Compétences / Qualités indispensables : Power BI, Databricks, SQL, SAP BW/HANA et SAP BusinessObjects BI4, Python / PySpark, Modélisation de données décisionnelles Compétences / Qualités qui seraient un + : Certification Power BI, consommation de topics Kafka, FinOps, Azure, Fabric, Power Platform, Scrum, SAFe, connaissance des processus de gestion de prestations de services et du suivi d'exécution des contrats et devis Informations concernant le télétravail : Globalement en télétravail, jours à prévoir occasionnellement pour certaines réunions d'équipe.

Rejoignez-nous ! Nous recherchons un(e) Data Engineer Hadoop / PySpark pour intervenir sur une plateforme Data stratégique et contribuer aux évolutions d'un datalake. Vous serez en charge de la mise en œuvre technique de nouvelles ingestions de données, des traitements de préparation et de transformation, ainsi que de la maintenance et de l'évolution des pipelines de données. Vous travaillerez en étroite collaboration avec les équipes de production applicative et DevOps, dans un environnement Agile, dynamique et international. Ce que vous ferez : Mettre en œuvre de nouvelles ingestions de données au sein du datalake. Développer les traitements de préparation et de transformation des données. Maintenir et faire évoluer les pipelines de données en PySpark et shell scripting. Développer et optimiser les traitements de données sur la plateforme Hadoop. Exploiter Hive et SQL pour la manipulation, la transformation et l'analyse des données. Collaborer avec l'équipe DevOps et lui adresser les demandes relatives aux évolutions de la plateforme. Participer à l'intégration et au déploiement des évolutions via les outils de gestion de code source et d'intégration continue. Rédiger des spécifications techniques claires et précises. Analyser et résoudre des problématiques techniques complexes liées aux traitements et pipelines de données. Contribuer à l'amélioration continue de la plateforme et être force de proposition sur les solutions et technologies à mettre en œuvre. Votre positionnement vous permettra d'intervenir au cœur d'une plateforme Data stratégique, en interaction avec des équipes techniques multidisciplinaires et internationales.

Contexte de la mission Le consultant travaillera en étroite collaboration avec les équipes de production applicative et DevOps afin de mettre en œuvre les évolutions techniques de la plateforme. Missions principales Mettre en œuvre de nouvelles ingestions de données. Réaliser les traitements de Data Preparation / transformation. Développer, maintenir et faire évoluer les pipelines de données en PySpark. Réaliser du Shell Scripting sous Unix/Linux. Collaborer avec l'équipe DevOps pour les demandes d'évolution de la plateforme. Participer au maintien en conditions opérationnelles et à l'évolution des traitements Data. Rédiger les spécifications techniques et documenter les solutions mises en œuvre. Compétences indispensables Très bonne maîtrise attendue : Hadoop Python / PySpark Hive SQL Shell Scripting Unix/Linux Environnement/outils : Git Jenkins Jira Méthodologie Agile / Scrum Anglais professionnel indispensable, à l'écrit comme à l'oral, Compétences appréciées / différenciantes Une expérience sur les technologies suivantes constituera un plus : Indexima – Alteryx – Altair – GCP – BigQuery – bibliothèques Python orientées API.

Vos missions ? Intégré(e) à nos équipes ou chez nos clients, vous contribuez à développer et valoriser l'ensemble des données en résolvant des problématiques business concrètes via les technologies liées à la Data A ce titre, vos missions seront les suivantes : - Concevoir et mettre en place des architectures de données en choisissant les technologies adaptées aux besoins. - Gestion des bases de données en garantissant la performance et la scalabilité des solutions de stockage. - Analyser et explorer les données avec les différents outils. - Mettre en place des tableaux de bord avec Power BI ou Tableau en exploitant les données transformées via Talend. - Interagir avec les équipes métier pour comprendre et les besoins. - Utiliser TALEND pour extraire des données depuis plusieurs sources (SQL, API, Excel ...). - Automatiser les processus ETL pour centraliser les données dans un Data Wrehouse (Snowflake). - Participation aux projets IA. Compétences requises : - ETL: Talend - Analyse de données (PowerBI, Tableau) - Base de données (SQL, GCP) - Langages: Python, SQL

En lien avec l'équipe de production applicative / DevOps, vous serez en charge de la mise en œuvre technique des évolutions du Data Lake. Vous interviendrez sur l'ingestion, la préparation et la transformation des données ainsi que sur l'évolution des pipelines. Votre rôle Ingestion et transformation des données · Mettre en œuvre de nouvelles ingestions de données au sein du Data Lake · Développer les traitements de préparation et de transformation des données · Développer les traitements associés en Python, PySpark et Hive Développement et évolution des pipelines · Maintenir et faire évoluer les outils de gestion des pipelines de données · Développer et maintenir les traitements en PySpark et les scripts Shell associés · Analyser et résoudre les problématiques techniques sur le périmètre Evolution de la plateforme Data · Identifier les besoins d'évolution de la plateforme liés aux traitements et pipelines de données · Formaliser et transmettre à l'équipe DevOps les demandes relatives aux évolutions de la plateforme · Rédiger les spécifications techniques nécessaires aux évolutions mises en œuvre

Dans le cadre du renforcement d'une équipe Data, nous recherchons un Data Engineer pour intervenir sur une plateforme Cloud et accompagner les équipes Data dans la mise à disposition et l'exploitation des données. Missions principales : - Concevoir et développer des flux d'alimentation et d'exposition de données - Participer à la conception et à la mise à disposition de solutions Data - Assurer la maintenance corrective et évolutive des flux - Participer au suivi de production et au support des utilisateurs - Accompagner les Data Analysts et Data Scientists dans l'exploitation des données - Contribuer à l'amélioration des performances et de la qualité des données - Participer à l'analyse et à la préparation des données