Trouvez votre prochaine offre d’emploi ou de mission freelance Databricks

Résumé L'Architecte Data joue un rôle clé en intégrant une équipe d'architecture data transverse. Sa mission principale est de concevoir et défendre une architecture efficace pour l'intégration de données et de services. Responsabilités : Concevoir et gérer l'architecture des données. Intégration et gestion des API sur la plateforme Data. Utilisation de Databricks pour l'analyse et le traitement des données. Être le point de contact pour la défense de l'architecture auprès des parties prenantes.

Architecte Data Databricks, Power BI, SQL, Python, Dataiku, Modélisation de données, Datamart, Data Visualisation, Unity Catalog, Gouvernance Data. 01/09/2026 3 ans de mission Paris ( 3 jours par semaine) Databricks, Power BI, SQL, Python, Dataiku, Modélisation de données, Datamart, Data Visualisation, Unity Catalog, Gouvernance Data. La mission consiste à intervenir en tant qu'Architecte Data / Data Engineer Senior au sein d'équipes métier et data afin d'accompagner la valorisation des données, la migration de plateformes analytiques et le développement de solutions décisionnelles. Le consultant participe à un programme de migration de projets Dataiku vers Databricks. Il accompagne les équipes métier lors des phases de recette, valide les résultats obtenus avant et après migration, identifie les écarts éventuels et contribue à leur correction afin de garantir la continuité des activités et la fiabilité des traitements de données. Il intervient également en tant que référent data auprès des équipes métiers afin d'améliorer les pratiques de développement, de structurer les processus de réalisation des projets data et de définir les standards techniques. À ce titre, il contribue à l'évolution des méthodes de développement, des processus de mise en production, de la gestion des versions, des tests, de la documentation et des bonnes pratiques de gouvernance. Le consultant accompagne les Data Engineers et Data Analysts dans leur montée en compétence au travers d'activités de coaching technique et méthodologique, participe à l'identification des écarts aux standards et propose des plans d'amélioration afin de renforcer la qualité et la maintenabilité des développements. Il réalise également des tableaux de bord décisionnels et des analyses ad hoc pour répondre aux besoins des directions métier. Il conçoit et optimise les modèles de données, construit les restitutions analytiques, développe des indicateurs, automatise les chaînes de traitement des données et assure la supervision des flux de données. Enfin, il contribue aux activités de gouvernance de la donnée à travers le catalogage des données, la documentation des dictionnaires et des lineage, le suivi de la qualité des données, la gestion des accès aux produits data et la mise en place de dispositifs permettant d'améliorer la fiabilité, la traçabilité et l'exploitation des données dans l'entreprise.

Votre mission Dans le cadre du développement de notre plateforme Data, nous recherchons un Data Engineer pour concevoir, développer et maintenir des pipelines de données performants dans un environnement Cloud AWS. Vous participerez notamment à : Développer et optimiser les traitements d'ingestion et de transformation de données avec Python, Spark et Databricks. Mettre en place les flux de données entre différentes sources et le Data Lake. Orchestrer et superviser les traitements avec Airflow. Garantir la qualité, la disponibilité et les performances des pipelines. Assurer le support, la correction des anomalies et l'amélioration continue de la plateforme. Participer aux choix techniques, aux ateliers projet et à la documentation.

Contexte : Dans le cadre de l'évolution d'une plateforme Data Groupe d'un acteur majeur du secteur des transports, nous recherchons un Architecte Solution / Tech Lead Databricks. Vous interviendrez au sein de l'équipe en charge de la plateforme Data afin d'accompagner plusieurs squads métiers dans la conception, l'industrialisation et la mise en production de leurs cas d'usage Data. Vous jouerez un rôle clé de référent technique, en accompagnant les équipes sur les choix d'architecture, les bonnes pratiques et la gouvernance de la plateforme. Vos missions : Participer au cadrage des projets Data et Big Data. Définir et valider les architectures techniques. Accompagner les Tech Leads et les équipes de développement. Concevoir des solutions basées sur Databricks. Participer aux revues d'architecture et aux arbitrages techniques. Rédiger la documentation d'architecture (DAT, HLD, DEX, dossiers techniques…). Accompagner les mises en production et les passages en exploitation. Participer à l'amélioration continue de la plateforme Data. Promouvoir les bonnes pratiques de développement, de sécurité, de gouvernance et de FinOps. Intervenir ponctuellement en support expert (N3). Former et accompagner les équipes projets. Environnement technique : Cloud : AWS Data Platform : Databricks Big Data : Spark, Scala, Python Data Lake / Lakehouse Power BI CI/CD : GitLab CI Infrastructure as Code : Terraform Conteneurisation : Docker, Kubernetes Sécurité & IAM Agile Scrum

Dans le cadre de l'évolution de sa Data Factory, un acteur majeur du secteur du luxe renforce ses équipes afin d'accompagner le développement de sa plateforme Data basée sur Databricks. L'objectif est de concevoir, développer et industrialiser des solutions de traitement et de valorisation des données, tout en intégrant les nouvelles capacités offertes par l'écosystème Databricks. Le consultant interviendra au sein d'une équipe agile composée de Data Engineers, Data Architects, Analytics Engineers et Product Owners.

Votre mission Dans le cadre du développement de notre plateforme Data, nous recherchons un(e) Senior Data Engineer / Tech Lead Databricks pour piloter les développements, garantir la qualité des solutions mises en œuvre et accompagner les équipes sur les sujets techniques. Vous serez notamment amené(e) à : Concevoir et faire évoluer l'architecture des pipelines de données sur Databricks. Développer et optimiser les traitements d'ingestion et de transformation en Python, Spark et SQL. Piloter l'orchestration et la supervision des traitements sur AWS. Garantir la performance, la fiabilité et la qualité des pipelines de données. Définir les bonnes pratiques de développement, participer aux revues de code et accompagner les membres de l'équipe. Assurer le support technique, la résolution des incidents complexes et l'amélioration continue de la plateforme. Participer aux ateliers d'architecture, aux échanges avec les équipes métiers et contribuer aux choix techniques.

Dans le cadre de l'évolution d'une plateforme Data Cloud stratégique, nous recherchons un Data Engineer Azure confirmé à expert, capable d'intervenir sur les enjeux de gouvernance, de partage et d'industrialisation de la donnée dans un environnement Azure Databricks. MissionsFaire évoluer une plateforme Data Lake existante sur Azure. Participer à l'intégration et au déploiement du Unity Catalog Databricks. Définir et mettre en œuvre les modèles de gouvernance et de gestion des accès aux données. Industrialiser les mécanismes de partage de données. Mettre à disposition les données sous forme de tables Delta Lake / Iceberg. Contribuer aux études techniques et aux Proofs of Concept (POC). Accompagner le déploiement d'un Data Lake gouverné. Compétences requisesIndispensables : Azure Databricks Unity Catalog Spark Data Engineering Azure GitHub Azure DevOps Gouvernance des données Architecture Data Lake Appréciées : Java JavaScript / TypeScript Formats Delta Lake et Iceberg Profil recherchéConsultant senior à expert Forte autonomie technique. Expérience significative sur des plateformes Data Cloud à grande échelle. Capacité à intervenir aussi bien sur les sujets d'architecture que de mise en œuvre opérationnelle. Excellentes capacités de communication et de collaboration avec les équipes Data et Infrastructure.

Data Engineer – Gestion d'ActifsNotre client, un acteur mondial majeur de la gestion d'actifs, recherche un Data Engineer expérimenté pour rejoindre son département Investment Accounting & Administration au sein de l'activité Investment Management. Il s'agit d'une opportunité stratégique de contribuer au développement et à l'évolution d'une plateforme de données cloud au cœur des opérations d'investissement, de l'analytique et du reporting. Le candidat retenu participera à la conception, au développement et à l'optimisation d'un hub de données d'entreprise complexe, permettant aux équipes d'investissement d'exploiter pleinement les données Bloomberg ainsi que d'autres sources de données financières. En collaboration avec des équipes internationales, vous développerez des solutions de données évolutives qui soutiennent la prise de décision et la création de valeur à partir des données. Principales ResponsabilitésConcevoir, développer et maintenir des pipelines de données et des produits data cloud robustes au service d'opérations d'investissement critiques et d'applications analytiques à grande échelle. Renforcer et étendre les capacités de la plateforme de données de l'entreprise à l'aide de technologies modernes de Data Engineering. Collaborer étroitement avec les équipes d'investissement et les parties prenantes métiers afin de comprendre leurs besoins et fournir des solutions adaptées. Développer des solutions performantes basées sur Databricks, Spark, Delta Lake et les technologies cloud natives. Promouvoir les meilleures pratiques en matière de développement et de gouvernance des données : qualité de code, CI/CD, tests automatisés et fiabilité des plateformes. Contribuer à l'adoption de technologies innovantes, notamment l'Intelligence Artificielle, les Large Language Models (LLM) et les outils d'analyse avancée. Assurer une veille technologique continue afin d'accompagner l'évolution de la plateforme et des capacités de l'équipe. Compétences et Expérience RequisesMinimum 5 ans d'expérience en Data Engineering, dont au moins 5 ans sur Databricks dans la conception et le développement de pipelines de données. Solide expérience du cloud, idéalement Microsoft Azure ; une expérience sur AWS ou GCP sera également considérée. Maîtrise de Python, PySpark, SparkSQL et/ou Scala. Expérience dans la mise en place et l'orchestration de pipelines Big Data avec des outils tels qu'Azure Data Factory, Airflow, dbt ou équivalents. Expertise de Spark, particulièrement Databricks Spark et Delta Lake. Expérience dans l'implémentation de solutions Big Data dans un environnement cloud, incluant les Data Lakes et architectures Lakehouse. Excellentes compétences SQL avec la capacité de développer et d'optimiser des requêtes complexes sur de très grands volumes de données. Maîtrise de GitHub, du contrôle de version et des processus de déploiement CI/CD. Expérience des technologies d'IA, des LLM, de Databricks Genie ou d'outils similaires. Compétences SouhaitéesExpérience en architecture de bases de données et en modélisation de données (modèles conceptuels, logiques et physiques). Expérience préalable dans la gestion d'actifs, l'asset management, l'investissement ou un environnement de services financiers. Qualités PersonnellesExcellentes capacités d'analyse et de résolution de problèmes. Forte capacité d'apprentissage et adaptation rapide aux nouvelles technologies. Aisance relationnelle et aptitude à collaborer avec des équipes et parties prenantes internationales. Cette opportunité offre la possibilité de rejoindre une équipe Data en forte croissance et de contribuer à une plateforme stratégique au cœur des activités d'un leader mondial de la gestion d'actifs.

Contexte du poste Nous recherchons un Architecte Data / Tech Lead Databricks afin de rejoindre une équipe en charge d'une plateforme Data stratégique hébergée sur AWS. Vous accompagnerez les équipes projets dans la conception, le développement et le déploiement de leurs cas d'usage Data tout en garantissant le respect des bonnes pratiques d'architecture, de gouvernance et de performance. Véritable référent technique, vous interviendrez depuis le cadrage des projets jusqu'à leur mise en production, dans un environnement Cloud moderne reposant sur AWS, Databricks, GitLab CI, Power BI et Okta. Missions principales Accompagner les équipes projets dès les phases de cadrage jusqu'à la mise en production des applications Data Participer aux cérémonies Agile et représenter la plateforme Data auprès des équipes métiers et techniques Conseiller les Tech Leads sur les choix d'architecture et les bonnes pratiques Databricks Réaliser l'onboarding des équipes projets et les accompagner dans leur montée en compétences Concevoir et faire évoluer les briques techniques de la plateforme Data Définir et promouvoir les standards de développement, d'industrialisation et de gouvernance des données Superviser les développements liés aux pipelines d'ingestion, de transformation et d'exposition des données Identifier les risques techniques et proposer des plans d'actions adaptés Participer au maintien en condition opérationnelle de la plateforme et intervenir en support N3 sur les incidents complexes Contribuer aux revues de code, aux audits techniques et à l'amélioration continue des pratiques Rédiger la documentation technique (DAT, dossiers d'exploitation, procédures, contrats d'interface) Participer aux phases de recette, de validation et de mise en production

Dans un contexte international, l'ingénieur⸱e travaillera en collaboration avec : - Les équipes IT (Data, Support, Sécurité, Ops, etc…) - Les éditeurs et partenaires supports des solutions (TMA, TMT, etc..) - Les équipes métiers (ponctuellement) L'objectif de la mission est d'assurer l'exploitation technique des applications SaaS ou Progiciel "P2P & TRAVEL" regroupant les process métiers suivants : - Process de dématérialisation (commande, facture, EDI, process achat...) - Voyages (notes de frais, réservation, etc) - Gestion des contrats et fournisseurs La mission sera orientée exploitation et support mais permettra aussi la prise en charge de quelques petites évolutions techniques (<5 jours) Objectifs et livrables - Participation aux réunions d'animation (daily, copro, support) - Support technique et traitement d'incidents techniques (Niv 3) - Investigations techniques (SQL, API, fichiers, etc...) dans le traitement des incidents - Communication et échanges avec les différents intervenants supports ou partenaires (TMA, centre de service support, etc..) - Suivi de la sécurité, rédaction et mise en œuvre de plan d'actions - Suivi des composants, flux, batch automatisés et performance des solutions (monitoring technique) - Paramétrage des outils lors d'ouverture pays - Mise en œuvre et suivi d'évolutions techniques Livrables de la mission - Traitements d'incidents Niv-3 - Mise à jour des documents de suivi RUN - Mise en place de procédures et plans d'actions - Mise à jour de spécifications techniques détaillées (interfaces ou traitements) - Mise a jour de documentation - Alimentation de cahiers de recette - Paramétrages techniques

Contexte Au sein de la Direction Digital et Data, vous intégrerez le Data Lab en charge de l'ensemble des projets BI et Data pour les enseignes et les fonctions d'appui du Groupement (Intermarché, Netto, Supply Chain, Immo Mousquetaires, …). En tant qu'Ingénieur devOps, votre mission principale sera de participer au déploiement des projets data du Groupement. La plate-forme utilisée est le Cloud Microsoft Azure. Vous êtes polyvalent et savez communiquer avec les différentes équipes. Afin d'assurer un niveau de sécurité conformes aux exigences du groupement sur les applications du Datalab, vous savez organiser des ateliers, suivre et rendre compte de l'avancement des sujets de sécurisation liés aux résultats d'audit, et apporter des solutions ou des pistes de réflexion en accords avec votre expertise de sécurité de la plateforme cloud Azure, notamment sur la mise en place d'applications Web et d'API. Vous ferez partie d'une équipe d'une dizaine de collaborateurs et travaillerez dans un environnement Agile. Le contexte vous plaît ? Découvrez votre quotidien au sein de votre future équipe. Vos missions-Construire des infrastructures Cloud Public (principalement sur Azure)-Industrialiser les architectures cibles et configurer les équipements (CI / CD) -Mettre en place des procédures et outils de surveillance permettant de garantir la haute disponibilité des infrastructures. -Participer aux phases de validation technique lors des mises en production ou des évolutions. -Collaborer avec les équipes de développement, sécurité et projets dans la réalisation de la transformation Vos atouts pour réussir De formation supérieure en informatique, vous justifiez d'une expérience de 4-10 ans dans un contexte Data. Vous disposez des connaissances sur les outils et méthodologies suivants : -Cloud Azure-Infrastructure as a code (ARM, YAML) -Intégration et déploiement continu (Git, Azure DevOps) -Services Big Data : Azure DataLake, Azure EventHub, Azure Databricks, Azure Data Factory, Power BI-Services Web : Azure FunctionApp, Azure WebApp-Micro-services/containers (AKS) -Base de données : SQL DB, CosmosDB La connaissance de ces langages de programmation serait un plus : Spark et Scala.

Dans le cadre du renforcement d'une plateforme Data, nous recherchons un Tech Lead Data Engineering afin d'accompagner les équipes sur les sujets d'architecture, de développement et d'industrialisation des traitements de données. Le consultant jouera un rôle de référent technique et contribuera à la montée en maturité de la plateforme Data. Missions : Définir les choix d'architecture et les bonnes pratiques de développement autour de Databricks et AWS. Concevoir, développer et superviser les pipelines de données de bout en bout. Garantir la qualité, la performance et la fiabilité des traitements Data. Accompagner les Data Engineers dans les développements, les revues de code et la montée en compétences. Participer à la conception des modèles de données et à l'industrialisation des traitements. Collaborer avec les équipes Produit, UX/UI et les métiers afin de challenger les besoins et proposer les solutions techniques les plus adaptées. Contribuer à l'amélioration continue de la plateforme, à l'automatisation des déploiements et à l'optimisation des performances. Assurer une veille technologique et recommander les évolutions de l'écosystème Data.

En tant que Tech Lead, vous êtes l'expert Data Engineering et le référent technique dans vos missions. Vous intervenez principalement sur les problématiques d'ingestion, de traitement et d'industrialisation des données sur la data plateforme. Sans être responsable de l'architecture Data globale, vous avez un rôle clé dans la qualité des livrables, la standardisation des pratiques et la montée en compétence des Data Engineers. Expérience attendue : 7 à 12+ ans en Data Engineering avec une expérience dans un rôle de référent technique Vous correspondez au/à la Tech Lead que nous recherchons si : Vous disposez d'un leadership technique, reconnu et légitime auprès des équipes Vous savez animer, encadrer et fédérer une équipe autour de bonnes pratiques techniques et d'objectifs communs Vous faites preuve d'une excellente communication, associée à une forte capacité pédagogique Vous adoptez un esprit critique constructif et savez challenger les choix techniques dans une logique d'amélioration continue Vous êtes capable de prendre du recul sur des problématiques techniques afin de proposer des solutions pertinentes et durables Vous êtes autonome, proactif et doté d'un fort sens des responsabilités Vous favorisez le partage de connaissances et la montée en compétence collective Vous savez collaborer efficacement avec des rôles transverses (Architectes, Product Owners, DevOps, ML Engineers) Vous maîtrisez Python et SQL à un niveau avancé, avec une forte sensibilité aux bonnes pratiques de software engineering (qualité, maintenabilité, testabilité) Vous êtes capable de définir, documenter et faire appliquer des standards de développement, incluant la structuration des projets, les conventions de code et les stratégies de tests Vous avez une expérience significative dans la mise en place et la maintenance de chaînes CI/CD appliquées aux pipelines Data Vous portez une attention particulière à la qualité des données, à la testabilité et à l'observabilité des pipelines en production Vous pratiquez régulièrement les revues de code, le mentoring et l'accompagnement technique des Data Engineers Vous êtes en mesure de concevoir des frameworks internes et des briques techniques réutilisables afin d'industrialiser et standardiser les développements Vous comprenez les enjeux de performance, de scalabilité et de maîtrise des coûts, et savez les intégrer dans vos choix techniques

The Data Office serves as the cornerstone of all data-related activities within a prominent healthcare framework. We seek a Data Engineer to join our multi-disciplinary agile team comprising data engineers, reporting experts, data functional analysts, project managers, data architects, data quality experts, and AI specialists. Together, we transform Belgian healthcare data into actionable insights that support policy decisions and enhance care quality, driving tangible societal impact. Roles & Responsibilities Your main responsibilities will include: Designing, building, deploying, and maintaining BI solutions (data ingestion, data warehouse, data marts) in alignment with established standards and functional/non-functional requirements. Testing analytics solutions, resolving issues, and providing necessary maintenance and technical documentation. Creating visualizations and reports using Power BI or SSRS. Conducting prototype reviews and demos, including training business users on data models. Collaborating with the Project Leader throughout the project lifecycle to ensure effective delivery. Supporting the organization in its transition to Databricks. Key Requirements Master's degree in Computer Science or equivalent experience. Minimum 7 years of experience as a Data Engineer within the Microsoft BI stack (Visual Studio, SSIS, SSAS, SSMS, SSRS, Power BI, SQL Server). Experience with Azure Databricks and Python is advantageous. Solid understanding of data warehouse design principles, specifically Kimball dimensional modeling. Experience working in an agile project environment is a plus. Nice to Have Proficiency in agile methodologies. Experience in developing and maintaining complex BI solutions. Other Details This is an opportunity to work in an impactful role within the health care domain, with potential for further development and benefits associated with working on meaningful data services.

Dans le cadre du développement de nos activités, nous recherchons un(e) Architecte Solutions IT disposant d'une solide expertise en architecture data et d'une bonne connaissance des métiers de la finance et de l'assurance. Vous interviendrez sur des projets stratégiques de transformation des systèmes d'information, en étroite collaboration avec les équipes métiers et les équipes techniques. En tant qu'Architecte Solutions IT, vous serez responsable de la définition et de la mise en œuvre des architectures techniques et data. À ce titre, vous serez amené(e) à : Concevoir des architectures applicatives et data robustes, évolutives et sécurisées. Définir les orientations techniques et garantir leur cohérence avec les standards d'architecture de l'entreprise. Intervenir sur les projets liés aux plateformes Data (Data Lake, Data Warehouse). Collaborer avec les équipes métiers afin de traduire les besoins fonctionnels en solutions IT adaptées. Garantir la conformité des solutions avec les exigences réglementaires, notamment celles liées à Solvabilité II. Accompagner les équipes projets dans les choix d'architecture et les bonnes pratiques. Compétences techniques attenduesSolide expérience en architecture IT et/ou architecture Data. Très bonne maîtrise de Databricks et des écosystèmes Data (ETL, traitement et intégration des données...). Bonne connaissance des environnements SAS (Base SAS, SAS Grid…). Expérience des environnements Cloud, idéalement Microsoft Azure. Bonne compréhension des problématiques de gouvernance et d'architecture des données. Connaissances métierUne expérience dans le secteur de la finance ou de l'assurance est indispensable, avec des connaissances sur les sujets suivants : Finance / Assurance Réglementation prudentielle Réassurance Solvabilité II

TEKsystems recherche pour l'un de ses clients grand compte un(e) Data Analyste (H/F) Les tâches : Assurer partiellement la continuité de l'activité Data dans le cadre d'une mission à mi-temps. Procéder mensuellement à la mise à jour du périmètre patrimonial (bâtiments et compteurs) pour alimenter les différents outils et rapports internes. Accompagner le pôle Performances Energétique pour paramétrer la future plateforme d'Hypervision. Mettre à disposition les données nécessaires à son bon fonctionnement. Maintenir les rapports Power BI existants en s'assurant de la bonne remontée des données. Répondre aux besoins d'analyse ponctuels des équipes. Activités principales Mise à jour du périmètre patrimonial : Actualisation des tables Lab dans Databricks Identification et rectification des codes sites manquants Vérification des évolutions du périmètre avant partage Analyse et correction des éventuels échecs d'import dans les outils Mise à disposition des données pour la nouvelle plateforme Hypervision : Comprendre les spécificités liées à la nouvelle plateforme Adapter les livrables de mise à jour du périmètre pour répondre aux besoins métier Maintenance des rapports BI : S'assurer de la remontée effective des données sources Corriger les anomalies éventuelles Adapter les visuels aux besoins d'évolution Conseiller et supporter les équipes : Répondre aux besoins d'analyse des équipes (Achats, Performances Energétique, SAV, Photovoltaïque, IRVE, …)