Au sein d'une équipe Agile dédiée à des produits data innovants pour le réseau électrique, vous intervenez en tant que Lead Tech Data. Vous assurez le rôle de référent technique sur des sujets liés à la maintenance prédictive, la mobilité électrique et l'analyse des charges réseau. Vous concevez et maintenez des applications, API, dashboards et pipelines de données en Python. Vous contribuez au cadrage technique des projets, à leur industrialisation et à la qualité des réalisations : revues de code, tests, bonnes pratiques et intégration continue. Vous accompagnez également les développeurs et les Product Owners dans les choix techniques et la résolution des problématiques rencontrées.
Vous serez directement en contrat avec notre société de prestation intellectuelle Actual Talent Services, implantée à La Défense et rattaché hiérarchiquement à votre business manager. Vous interviendrez dans un environnement backend Java/Data exigeant, avec un fort niveau d'attention porté à la qualité du code, aux bonnes pratiques de développement, aux tests et à la documentation technique. Vous évoluerez notamment dans un environnement Java / Spring Boot et Data. Vos missions principales / responsabilités seront les suivantes (liste non exhaustive) : Productions de code de qualité respectant les bonnes pratiques, conventions et standards de développement ainsi que les tests associés Productions de documentations techniques. Référentiel sous Confluence
Le bénéficiaire souhaite une prestation d'accompagnement dans l'objectif d'assurer une mission dans le cadre de notre transition vers une architecture Data Mesh. Nous recherchons un(e) Data Product Engineer spécialisé(e) dans le développement de pipelines sur la plateforme Talend Real Time BigData et de data products sur la plateforme Starburst. Votre mission sera de concevoir, collecter, intégrer, construire et opérer des jeux de données fiables, auto-descriptifs et interopérables, en collaboration avec les domain métiers et les data owners. Missions clés : - Conception de flux de données et de Data Products Développement des pipelines d'intégration de données optimisés via la Talend Data Fabric / Talend Real Time BigData ou encore Spark / Astronomer Documentation des pipelines d'ingestion de données Intégration des données dans l'écosystème Data Mesh Collaboration avec les domaines métiers pour identifier les sources de données et les cas d'usage. Développement des data products / data sets (vues & vues matérialisées) répondant à des cas d'usage identifiées avec les responsables de domaines métiers Développement des requêtes SQL optimisées pour Starburst (push-down predicates, partitionnement, formats de fichiers comme Iceberg/Parquet). Documentation les data products (métadonnées, ownership, qualité) Contribution à l'amélioration continue des data produts dans de la plateforme Starburst Mise en place des alertes et des dashboards pour le suivi des data products.
Dans le cadre du renforcement de ses équipes Data Platform / Data Factory, recherche un Data Engineer expérimenté pour intervenir sur ses projets Data. Le consultant intégrera un environnement Data en croissance, avec des enjeux d'industrialisation, de performance, de qualité et de gouvernance de la donnée. Missions principales Concevoir, développer et maintenir des pipelines de données. Assurer l'ingestion, la transformation et la mise à disposition des données. Développer et industrialiser les traitements Data sous Databricks / Spark. Participer à l'évolution de la Data Platform Azure. Optimiser les traitements et les performances des pipelines. Travailler sur la qualité, la fiabilité et la disponibilité des données. Participer aux problématiques de traitement batch et/ou temps réel. Contribuer aux bonnes pratiques de développement et d'industrialisation Data. Collaborer avec les équipes Data Platform, Data Engineering, Data Science et les équipes métiers. Contribuer aux enjeux de gouvernance et de sécurisation des données. Avec un écosystème Data Platform comprenant également des enjeux autour de Databricks Unity Catalog, notamment pour la gouvernance, le lineage et la gestion des accès.
Nous recherchons pour un de nos clients basé en IDF, un Analyste/Ingénieur Big Data Scala - Spark pour une mission freelance (longue visibilité) ContexteDans le cadre d'un appel d'offres , notre client recherche un Analyste / Ingénieur Big Data Scala - Spark pour renforcer une équipe en charge de la gestion et de l'exploitation d'une plateforme Big Data. Démarrage : Début novembre 2026 Missions :Au sein de l'équipe, vous interviendrez principalement sur : Le maintien en condition opérationnelle des traitements Big Data. Le suivi de production et l'exploitation quotidienne des flux de données. L'analyse et la correction des incidents. La fiabilisation et l'amélioration de la qualité des données. L'analyse technique de traitements existants. La compréhension et la reprise de développements conçus par d'autres équipes afin d'en assurer les corrections et évolutions.
Dans le cadre de l'évolution d'un produit stratégique de gestion de stock magasin, nous recherchons un Product Owner Senior pour accompagner les équipes produit et développement dans un contexte international. Vous serez responsable de la construction et de l'animation de la roadmap produit, de la gestion du backlog ainsi que de la priorisation des besoins métier. En collaboration avec les différentes parties prenantes, vous contribuerez à la définition des fonctionnalités et à leur mise en œuvre afin de garantir la création de valeur pour les utilisateurs. Vos missions principales seront les suivantes : Construire et faire évoluer la roadmap produit. Définir, prioriser et maintenir le backlog. Challenger et formaliser les besoins métier. Rédiger les epics, user stories et critères d'acceptation. Animer les cérémonies Agile/Scrum. Organiser et piloter les ateliers de conception. Accompagner les équipes de développement tout au long des sprints. Réaliser les démonstrations produit et recueillir les retours utilisateurs. Assurer le suivi des indicateurs de performance et contribuer à l'amélioration continue du produit. Exploiter les outils d'intelligence artificielle générative afin d'améliorer la formalisation des besoins, la documentation, la conception fonctionnelle et la productivité des équipes.
Localisation : Lyon Démarrage : ASAP Fin de mission : 16/11/2027 Télétravail : 3 jours par semaine (2 jours sur site) TJM : 330 € HT/jour Expérience : 3 à 7 ans Contexte de la missionDans le cadre du développement de sa Data Platform, notre client recherche un Data Engineer Java / Scala pour concevoir et développer des services digitaux centrés sur la donnée. L'objectif est de mettre à disposition des équipes des données fiables et accessibles via API, de simplifier les traitements analytiques et de renforcer l'alignement entre les besoins opérationnels et décisionnels. Le consultant interviendra notamment sur des projets liés aux référentiels articles et magasins. Missions principalesConcevoir, développer et maintenir des pipelines de données performants et fiables. Participer à la mise à disposition des données via des API et des services adaptés aux besoins métiers. Développer des traitements distribués et des flux de données en temps réel. Exploiter les environnements Cloud et les services de la plateforme data. Optimiser les requêtes SQL et les traitements sur des volumes importants de données. Mettre en œuvre les bonnes pratiques de qualité, de tests et d'industrialisation du code. Contribuer à l'amélioration continue de la plateforme et partager les bonnes pratiques au sein de l'équipe. Compétences techniques requisesLangages : Java et/ou Scala, avec une bonne compréhension de la programmation fonctionnelle. Traitement de données : Apache Spark, Apache Kafka. Cloud & Data : Google Cloud Platform (GCP), BigQuery, SQL avancé. Pipelines de données : DBT (Data Build Tool). Streaming : Pub/Sub et gestion des flux en temps réel. Industrialisation : GitLab CI/CD, Docker Compose. Environnement : Linux, ligne de commande et Git. Méthodologie : Agile / Scrum.
Data Engineer SENIOR AWS / SPARK/PYTHON 500 e par jour Data Engineer Senior – Data Services Profil très orienté AWS / Spark / Python / DBT / Iceberg / Airflow, avec une bonne maîtrise des architectures Big Data / Lakehouse et de la modélisation Médaillon. REcherchent quelqu'un de t senior, avec 8 ans d'expérience minimum. Mission à temps plein, avec 3 jours de remote par semaine. AWS, Python, Spark et modélisation Médaillon. Terraform et Datadog sont également appréciés. Mission Asap 500 e par jour
Missions : Être la référence technique Data Engineering : définir les standards d'architecture, challenger les choix techniques, industrialiser les pipelines, garantir performance/qualité/sécurité et accompagner les équipes. Profils recherchés : Senior / Expert – Lead Data Engineer / Data Architect / Data Engineering Design Authority Compétences : Architecture Data, batch/streaming, Kafka, Spark, Airflow, Databricks, Snowflake, Cloud, DataOps, gouvernance/sécurité. Anglais B2+
Nous recherchons pour une mission longue chez notre client secteur banque/finance en région parisienne un Data Engineer Senior à posture de lead, pour porter une plateforme de données AWS lancée from scratch pour une équipe des marchés actions. Chaque nuit, des batchs produisent des prix, des sensibilités et du PnL sur plusieurs centaines de millions de lignes. Les équipes métier connaissent ces données, mais ont besoin d'un expert pour construire des pipelines industriels. Vous pilotez le projet au quotidien, en appui du Tech Lead qui valide les grandes orientations. Vos missions : - Porter le projet de bout en bout : cadrage avec le métier, découpage, priorisation et plan de livraison. - Proposer et défendre les choix d'architecture, et arbitrer en autonomie. - Encadrer deux développeurs (un junior, un confirmé) : standards de code, revues, montée en compétences. - Définir la stratégie de refactoring d'un projet existant, priorisée par risque et par valeur. - Construire un framework commun piloté par configuration et développer les pipelines Python / PySpark sur AWS Glue. - Orchestrer avec Step Functions et EventBridge, organiser le stockage S3 (Parquet ou Iceberg) et l'exposition via Glue Data Catalog et Athena. - Mettre en place la qualité des données et le monitoring, et optimiser performances et coûts. - Industrialiser avec l'équipe DevOps : Terraform, CI/CD, tests. Vous rejoignez Ingéniance en CDI et intégrez une communauté d'experts de la data et de la finance de marché. Ref : O-SIYUA
Missions principales ■ Être force de proposition et participer à la conception des solutions techniques avec les membres de l'équipe ■ Comprendre les enjeux métiers afin de concevoir des solutions répondant aux besoins fonctionnels ■ Participer aux cérémonies Agile SAFe : PI Planning, macro-chiffrage, raffinements, rétrospectives, etc. ■ Concevoir et faire évoluer les architectures de données selon l'approche Databricks Medallion Architecture (Bronze, Silver, Gold) ■ Garantir la qualité, la fiabilité et la performance des traitements en production : jobs Databricks et API ■ Contribuer à l'amélioration continue de la plateforme en proposant des optimisations, des bonnes pratiques et des innovations Activités ■ Concevoir, développer et maintenir des pipelines de données (ETL) pour les flux d'intégration et les flux métiers ■ Mettre en œuvre et orchestrer les traitements de données avec Databricks ■ Modéliser les données dans des tables Delta Lake en appliquant les bonnes pratiques de partitionnement, d'indexation, d'optimisation et de gouvernance ■ Optimiser les performances des traitements Databricks : Spark, Delta Lake, coûts et temps d'exécution ■ Assurer le développement, les tests et le déploiement des composants techniques via des processus CI/CD ■ Concevoir, développer et maintenir des API pour l'exposition et la consommation des données ■ Mettre en place des mécanismes de Data Quality, de monitoring et d'alerting ■ Identifier, analyser et résoudre les incidents de production, avec suivi des actions correctives ■ Rédiger et maintenir la documentation technique des solutions mises en œuvre ■ Accompagner les équipes dans l'adoption des bonnes pratiques de Data Engineering
ATTENTION : Seules les candidatures de personnes vivants déjà sur Bordeaux ou en train de démanger seront prises en compte car présentiel chez le client. Nous recherchons un Expert Solution Data / Architecte Data senior pour intervenir sur un programme stratégique de transformation Data dans le secteur financier. Vous accompagnerez le pilotage d'un projet Data d'envergure, depuis l'analyse des besoins jusqu'à la définition et la présentation des solutions, en lien étroit avec les équipes métier, MOA et architecture. Vous serez également amené à participer aux différentes instances de validation, à coordonner les parties prenantes et à contribuer au suivi opérationnel du programme. La mission s'inscrit dans un environnement complexe, avec de forts enjeux autour de la donnée, du reporting Finance et Risque et de la mise à disposition de données fiables et structurées. Le poste nécessite une bonne capacité de synthèse, une vision transverse des sujets Data ainsi qu'une réelle aisance dans les échanges avec des interlocuteurs métiers et techniques.
Data Engineer Senior — Databricks — Descriptif du poste Dans le cadre du développement de nos activités data, nous recrutons un Data Engineer Senior spécialisé sur la plateforme Databricks. Vous intervenez sur la conception et l'industrialisation de plateformes de données lakehouse : vous cadrez les besoins avec les équipes métiers, vous définissez les architectures cibles, vous construisez les pipelines d'ingestion et de transformation, et vous assurez leur mise en production ainsi que leur optimisation en coût et en performance. Vous êtes l'interlocuteur technique direct des équipes métiers sur votre périmètre et vous accompagnez la montée en compétences des profils plus juniors. — Parmi vos missions 🛠 Concevoir et industrialiser les plateformes de données sur Databricks Concevoir des architectures lakehouse en couches (bronze / silver / gold) sur Delta Lake Développer et optimiser les pipelines d'ingestion et de transformation en PySpark et en SQL Industrialiser les traitements avec Databricks Workflows, Delta Live Tables et une chaîne CI/CD Optimiser les coûts et les performances : dimensionnement des clusters, partitionnement, Photon, gestion du cache Mettre en place la gouvernance et la qualité des données Structurer Unity Catalog : catalogues, schémas, gestion des droits, lignage Définir les règles de qualité, les tests et le monitoring des pipelines en production Documenter les modèles de données et les contrats d'interface avec les systèmes amont et aval Cadrer les besoins avec les équipes métiers Animer les ateliers de recueil de besoins et traduire les exigences en solutions data Préconiser les architectures cibles et arbitrer les choix techniques (batch ou streaming, build ou buy) Présenter et défendre vos recommandations auprès des interlocuteurs techniques comme métiers Piloter la livraison et faire monter l'équipe en compétences Piloter un lot de bout en bout : conception, chiffrage, livraison, respect des délais Encadrer les profils juniors en revue de code et en pair programming Diffuser les bonnes pratiques d'engineering : versioning, tests, revue, documentation — Modalités pratiques Lieu : Ile de France Type de contrat : CDI Date de démarrage : A définir Télétravail : Fonction des contraintes opérationnelles (en moyenne : 2 jours)
Contexte de la missionAprès la migration des données non-SAP vers Azure,nous souhaitons renforcer son architecture Data, développer de nouveaux cas d'usage métiers et améliorer la gouvernance, la sécurité et la performance de notre plateforme Pour accompagner ces évolutions, elle recherche un Azure Data Engineer Senior, disposant d'une expertise approfondie en Azure Databricks, Databricks Unity Catalog et Azure Data Architecture Missions et responsabilitésConcevoir, développer et maintenir des pipelines de données avec Azure Data Factory, Databricks et les services Azure. Mettre en place des architectures modernes de données : Data Lake, Delta Lake et Lakehouse. Développer et industrialiser des solutions Data répondant aux besoins métiers, analytiques et Data Science. Participer à l'implémentation et à l'administration de Databricks Unity Catalog : catalogues, schémas, permissions, partage et gouvernance des données. Contribuer au développement d'une stratégie de Data en libre-service (Self-Service Analytics). Garantir la sécurité, la fiabilité, la scalabilité et la performance de la plateforme Data. Surveiller et optimiser la consommation des ressources ainsi que les coûts Azure et Databricks. Automatiser les processus d'ingestion, de transformation et de déploiement des données. Collaborer avec les Data Analysts, Data Scientists et les équipes métiers. Documenter les architectures, les flux de données et les bonnes pratiques. Assurer la maintenance et l'amélioration continue de la plateforme Azure Data
Un projet stratégique de la filière Risques d'un grand groupe bancaire : mesurer l'impact des risques climatiques et physiques sur le risque de crédit, sur Google Cloud. Au sein du domaine Risques de la DSI, le projet ingère, agrège et expose des données de sources multiples pour produire les rapports de surveillance du risque de crédit. La solution est bâtie sur Google Cloud Platform, portée par une équipe engagée et experte du sujet. Le projet est à forte visibilité : les critères d'expertise technique sont impératifs. Vos principales missions : Développer et intégrer des solutions Python / Spark avec les services data et compute de Google Cloud Platform. Ingérer, agréger et exposer des données issues de sources multiples. Contribuer à la chaîne DevOps du projet : déploiements, infrastructure as code. Ce que la mission vous apporte : Un sujet d'actualité réglementaire et sociétale : le risque climatique en banque. Une stack GCP complète, de l'ingestion à l'exposition. Environnement technique : GCP (BigQuery, Dataproc, Composer, Cloud Functions, Cloud Run Jobs, GCS), Python, Spark, XL Deploy, Terraform, Jenkins.
Description et livrables de la prestation Le Data Engineer est un développeur au sein de l'équipe Engineering Open Big Data du Département Guilde Data, qui regroupe l'ensemble des expertises technologiques liées à l'ingénierie de la donnée, de l'automatisation et à l'exploitation des modèles de Machine Learning. Votre rôle et vos missions : Vous aurez pour missions principales de développer les projets Big Data demandés par le métier, et notamment : • Passer de la donnée brute à de la donnée exploitable, exposée sous forme de tables requêtables dans le Datalake • Consolider ces données au fur et à mesure de leur alimentation récurrente dans le Datalake • Les exploiter pour atteindre la finalité business (exposition de Business View, réintégration des résultats dans le SI, service de scoring, …) • De mettre en place et de garantir le respect dans la durée d'un processus qualité sur l'ensemble du cycle de DEV (documents, tests unitaires / intégration / fonctionnels, commentaires, versionning, etc.) • Accompagner les Data Engineers sur son périmètre pour garantir la qualité des livrables
