Trouvez votre prochaine offre d’emploi ou de mission freelance Databricks

Contexte Pour un acteur majeur disposant d'enjeux forts autour de la logistique et de la supply chain, nous recherchons un Data Architect pour concevoir et faire évoluer des solutions data complexes. Vous interviendrez dans un environnement Cloud techniquement mature pour accompagner la structuration et la scalabilité des architectures de données. Ce rôle stratégique nécessite une vision d'ensemble couplée à une solide gouvernance IT, afin d'aligner les feuilles de route technologiques sur des exigences métiers exigeantes. Vos missions Concevoir des solutions Analytics et Advanced Analytics scalables (traitements batch, event-driven, architecture Medallion). Modéliser les données aux niveaux conceptuel, logique et physique dans une approche orientée domaine (Domain-Driven). Définir les standards d'architecture, les architectures cibles et les trajectoires technologiques. Animer les revues d'architecture et garantir une gouvernance IT rigoureuse. Créer des data products, des modèles de données canoniques, des flux et des patterns d'intégration réutilisables. Sécuriser la gestion des accès, des métadonnées et le cycle de vie de l'information. Traduire les besoins métiers en décisions d'architecture pragmatiques en collaborant avec les Product Managers et les ingénieurs. Mentorer les équipes techniques pour accroître la maturité architecturale et l'alignement global des pratiques. Environnement technique Azure, Databricks, Data Lakehouse, SQL, Delta Lake, Python, Spark, API, intégration event-driven, ETL/ELT, outils d'IA (assistance au développement).

Hello, Pour le compte de l'un de mes clients Lyonnais dans le secteur de l'énergie, je suis à la recherche d'un tech lead Spark/Java/Databricks. Description du profil : Les missions s'inscrivent dans une trajectoire progressive : Phase 1 : Modernisation des traitements existants • Migration de traitements Informatica et PL/SQL vers Spark (Java) • Participation à l'optimisation des traitements existants • Maintenance corrective et évolutive des traitements PL/SQL • Appropriation des processus métier derrière les flux de données Phase 2 : Refonte cloud (Databricks) • Participation au projet stratégique de migration vers le cloud • Conception et mise en œuvre de pipelines de données sur Databricks • Industrialisation des traitements dans un environnement moderne En parallèle des missions de développeur big data, le tech lead aura en charge la définition de la trajectoire technique de l'équipe Spark, l'animation et la montée en compétence des développeurs big data. Activité : • Concevoir, développer et maintenir des pipelines de données en Spark (Java) • Migrer des traitements legacy vers des architectures Big Data modernes • Assurer la maintenance des traitements existants SQL / PL-SQL • Garantir la performance, la robustesse et la qualité des données • Participer activement au RUN et à l'amélioration continue • Evolutions et MCO du socle technique • Définir les besoins sur l'outillage (workflow de dev, CI/CD) et participer aux évolutions en collaboration avec l'équipe DevOps • Définir les évolutions nécessaires sur le socle technique • Accompagner les DE dans la prise en main et la maitrise de la stack de développement (socle, spark, delta, databriks) • Assurer la cohérence globale du code produit par l'équipe. • Assurer la vision long terme et l'alignement des développements avec les objectifs métiers et techniques.

Connaissance de la Suite Office 365, en particulier Excel et PowerBI Bonne connaissance sur power automate Maitrise de JIRA pour gérer les tickets de travaux Maitrise absolue d'Unity Catalog (Co admin du metastore France en PRODUCTION) TRES bon niveau sous databricks (co admin workspace en PRODUCTION) Connaissance de SQL, XML, JSON La mission nécessite des connaissances SI fortes. Une expérience en gestion d'application, de préférence dans un contexte BIGDATA. Il serait apprécié que le titulaire de la mission connaisse certains outils Bigdata tel que Azure, Databricks, Azure blob storage, Powerbi , PowerAutomate, PowerApp. La maitrise d'au moins un de ces éléments sera un plus. Environnement Technique Azure Power BI DATABRICKS Power Automate

Profil recherchéVous disposez d'une solide expérience en développement Python et en conception logicielle. Vous maîtrisez les principes de programmation orientée objet et savez concevoir des composants modulaires, réutilisables et maintenables. Vous avez une expérience significative dans le traitement de données volumineuses et l'optimisation de calculs. Vous maîtrisez les tests automatisés, les bonnes pratiques de développement et les processus d'intégration continue. Vous avez déjà travaillé avec au moins un framework de calcul distribué : Ray, PySpark ou Dask. Vous êtes capable d'analyser du code existant, d'en évaluer la qualité et de garantir sa conformité aux standards techniques. Qualités attenduesRigueur technique : capacité à faire respecter les standards de développement et de qualité, notamment lors de l'intégration de code produit par des tiers. Autonomie et adaptabilité : aptitude à investiguer des environnements complexes, à résoudre des problèmes techniques et à appréhender de nouveaux outils. Pragmatisme : capacité à concilier qualité logicielle, performance et contraintes de mise en production. Communication : aisance dans les échanges avec des interlocuteurs techniques et métier. Anglais technique : capacité à exploiter la documentation et à échanger avec des équipes internationales. Les connaissances de l'écosystème Azure, des problématiques réseau et de sécurité ainsi que des plateformes Databricks et Dataiku DSS constitueront des atouts supplémentaires.

Bonjour :) Nous avons une nouvelle opportunité au sein de notre client. Nous recherchons un Data Engineer confirmé(e)s à senior pour rejoindre son équipe Data Engineering. L'objectif : développer, maintenir et industrialiser les pipelines de données qui alimentent les analyses comportementales et les équipes analytics et e-commerce. Tu rejoindras une équipe de Data Engineers travaillant sur une plateforme Databricks avec Unity Catalog au centre, dans un environnement multi-cloud. Tes missions : Ingérer les données de tracking (web et app) et les mettre à disposition pour les analyses comportementales Développer, maintenir et industrialiser des pipelines PySpark / dbt sur Databricks Orchestrer les pipelines avec Airflow Modéliser, fiabiliser et garantir la qualité des données pour les équipes analytics et e-commerce Reprendre rapidement un périmètre existant et assurer la continuité de service Partager les bonnes pratiques au sein de l'équipe Environnement technique : PySpark dbt Databricks / Unity Catalog Airflow AWS Environnement multi-cloud

1. CONTEXTE DE LA MISSION Au sein de l'équipe MDM (Master Data Management) d'une filiale technologique d'un grand groupe de gestion d'actifs, la prestation a pour objectif de participer à la connectivité de la plateforme vers Snowflake et d'autres plateformes de distribution de données (Databricks, etc.). Les principales missions sont les suivantes : Minimiser les dépendances technologiques entre la plateforme et Snowflake, afin d'éviter un couplage fort avec la plateforme de distribution. Assurer la maintenance corrective et évolutive : spécifications, recettes, rédaction de documentation. Être référent sur les projets impactant l'équipe : suivi, coordination et plannings. Assurer le support utilisateur. 2. ENVIRONNEMENT FONCTIONNEL DE LA PRESTATION La prestation se déroulera au sein de l'équipe MDM, rattachée à la direction des développements dédiés à la gestion d'actifs. 3. ENVIRONNEMENT TECHNIQUE DE LA PRESTATION S3 Snowflake, Databricks Data Platform Data sharing API Data distribution

Nous recherchons un Analytics Engineer confirmé pour renforcer une équipe Data et intervenir sur des projets de transformation et d'industrialisation des données. Vous contribuerez à la conception de pipelines performants, à la modélisation des données et à l'évolution d'une plateforme Data moderne. Missions principalesConcevoir, développer et industrialiser des pipelines de transformation de données. Développer et optimiser les modèles de données avec dbt. Construire et faire évoluer la couche sémantique. Orchestrer les traitements avec Apache Airflow. Maintenir et optimiser les pipelines et datasets existants. Garantir la qualité, la fiabilité et la performance des données. Participer aux choix d'architecture et aux bonnes pratiques de développement. Collaborer avec les équipes Data Engineering et les équipes métiers. Environnement techniqueStack principale : Databricks / PySpark dbt Apache Airflow Python / SQL AWS (S3, Glue) Git / GitHub / CI/CD Compétences complémentaires : Scala / Spark Great Expectations Modélisation dimensionnelle (Kimball, Data Vault, OBT) Data Lineage / Data Governance

ACCROCHE SI TU ADORES CONSTRUIRE DES PIPELINES SOLIDES COMME LE ROC, CETTE ANNONCE EST POUR TOI... CE QUE TU RECHERCHES : Évoluer au sein d'une équipe dynamique Participer à des projets innovants d'envergure Relever des défis liés à l'ingénierie des données, aux flux et aux performances Donner un nouveau souffle à ta carrière Alors nous avons la mission idéale pour toi. Au sein d'un acteur majeur du secteur de la gestion d'actifs, tu participeras à la conception, à la mise en place et à l'optimisation d'architectures data robustes et évolutives au service de la valorisation de la donnée : Les pipelines de données, tu développeras La qualité, la fiabilité et la sécurité des données, tu garantiras L'intégration et la transformation des données, tu automatiseras Les architectures data (batch & temps réel), tu concevras La scalabilité et la performance des traitements, tu optimiseras Les outils de monitoring et de gestion des flux, tu mettras en place Ton équipe projet, tu accompagneras Aux rituels agiles et instances data, tu participeras QUI TU ES : Diplômé(e) de la formation qui va bien Surdoué(e) ou doté(e) d'une expérience de 10 ans minimum en ingénierie de la donnée ou en développement data Expert(e) en Azure Data Factory Habile avec les outils Azure Data Factory AU-DELÀ DES COMPÉTENCES TECHNIQUES, TU ES / AS : Dynamique : tu n'aimes pas rester les deux pieds dans le même sabot Autonome : un guide du Routard te suffira Esprit de synthèse : tu sais aller à l'essentiel Capacité d'adaptation : tu es un vrai caméléon Sens de la communication : les mots n'ont pas de secret pour toi Force de proposition : tu es l'Aladdin de l'informatique Esprit d'équipe : un pour tous et tous pour un !

#StormYourCareer Rejoins STORM GROUP et grandis avec nous ! Pilote la transformation Big Data du pôle Actuariat et modernise les chaînes de production financière vers DatabricksDans le cadre d'un projet stratégique de transformation Data chez l'un de nos grands comptes du secteur de l'assurance, nous recherchons un(e) Business Analyst & Data Engineer Big Data. Au sein des équipes SI Actuariat et Performance, ton rôle sera hybride, structurant et à forte valeur ajoutée : tu feras la jonction directe entre les directions métiers (actuaires, comptables, financiers) et les équipes IT pour moderniser les chaînes de traitement d'inventaire, fiabiliser les données réglementaires (IFRS 17, Solvabilité II) et orchestrer la migration progressive de l'écosystème Hadoop/Spark vers Databricks. Ton future environnementTu évolueras au cœur du pôle SI Actuariat de notre partenaire assurance, au croisement de la finance quantitative, de l'ingénierie logicielle distribuée et des architectures Cloud. En interface permanente avec les actuaires, les responsables du pilotage financier et les architectes Data, tu seras le moteur de l'évolution des plateformes. C'est le cadre idéal pour manipuler des volumes massifs de données financières, optimiser des traitements complexes sous Spark et concevoir des pipelines modernes sur Databricks au sein d'un environnement agile. Tes missions clésAnalyse Fonctionnelle, Cadrage & Conduite du Changement (Mode CONSEIL & BUILD) : Recueillir, analyser et challenger les besoins des équipes métiers (actuaires, comptables, responsables d'inventaire). Modéliser les règles de gestion et rédiger les spécifications fonctionnelles détaillées adaptées aux architectures Big Data. Traduire les exigences métier liées à la norme IFRS 17 et au suivi des situations financières en solutions techniques performantes. Garantir l'adéquation continue entre les traitements implémentés et les objectifs opérationnels de production des inventaires. Accompagner les utilisateurs métiers dans la prise en main des nouvelles solutions et piloter la conduite du changement. Data Engineering & Migration Hadoop vers Databricks (Mode TECH & MIGRATION) : Concevoir, développer et optimiser les pipelines de traitement de données distribués (Python, Scala, Apache Spark, Hadoop, HDFS, YARN). Analyser l'architecture des flux existants pour préparer, adapter et refondre les traitements vers la nouvelle plateforme Databricks (Cloud Azure ou AWS). Garantir la qualité, la traçabilité, l'exposition et la cohérence des référentiels de données actuarielles et financières. Automatiser et optimiser les performances des jobs de calcul batch et fil d'eau, en maîtrisant les requêtes complexes (SQL, NoSQL, scripting Linux). Qualité, Recette & Industrialisation (Mode RUN & QUALITÉ) : Élaborer et exécuter les stratégies de tests fonctionnels, techniques et de contrôle de qualité des données (data quality). Assurer la mise en production, la mise en place de la CI/CD, le suivi opérationnel des chaînes de production et la résolution des anomalies. Rédiger la documentation technique, fonctionnelle et la cartographie des règles de gestion pour pérenniser la connaissance. Ton profilFormation : Diplôme Bac+5 (Diplôme d'Ingénieur, Master 2 universitaire) en informatique, Data Engineering, mathématiques appliquées ou finance quantitative / actuariat. Expérience : Tu justifies d'une expérience confirmée de 5 à 10 ans sur des fonctions hybrides de Business Analyst Data, Data Engineer ou Consultant SI Actuariat/Finance. Expertise Technique Big Data Impérative : Solide expérience de développement et d'optimisation sous Apache Spark et l'écosystème Hadoop (HDFS, YARN). Pratique ou intérêt marqué pour la plateforme Databricks et son déploiement sur les environnements Cloud (Azure ou AWS). Maîtrise avancée de la programmation en Python et/ou Scala, ainsi qu'une excellente maîtrise du langage SQL et des bases de données distribuées. Connaissance des outils d'industrialisation, de scripting Linux et des pipelines CI/CD. Compétences Fonctionnelles Métier : Maîtrise des démarches de Business Analysis (ateliers, cahiers des charges, spécifications fonctionnelles). Connaissance indispensable des processus financiers, comptables ou actuariels, avec une bonne appréhension des enjeux des inventaires. Connaissance de la norme IFRS 17 (et idéalement des exigences Solvabilité II). Pratique des méthodologies Agile / Scrum. Langues : Anglais professionnel opérationnel. Tes atoutsDouble Casquette Technico-Fonctionnelle : Aisance remarquable pour dialoguer avec les actuaires tout en traduisant leurs formules complexes en code distribué performant. Esprit Analytique et Rigueur : Sens aigu du détail et exigence sur la précision des données financières produites. Posture Proactive et Travail en Transverse : Capacité à faire avancer les projets de transformation en fédérant les acteurs IT et métiers autour d'objectifs communs. Nos avantagesRemboursement des titres de transport à hauteur de 75%. Tickets restaurant pris en charge par STORM GROUP à hauteur de 50% (10,5 euros / jour). Accès Gymlib / Wellpass (sport et bien-être). Contrat Santé / Prévoyance mis en place auprès de la compagnie Alan. Formation continue : Accès à Udemy Business et accompagnement aux certifications Databricks / Cloud. Prime de cooptation, prime d'intéressement et de participation. Deux à trois jours de télétravail par semaine. 5 raisons de nous rejoindreParcours sur mesure : Co-construis une trajectoire professionnelle unique, adaptée à tes ambitions. Missions Stratégiques : Interviens sur des projets d'envergure, en parfaite cohérence avec ton expertise. Suivi Dédié : Bénéficie d'un pilotage annuel structuré pour garantir ta progression continue. Excellence Continue : Développe tes compétences au quotidien au sein d'un écosystème exigeant. Performance Durable : Évolue dans un cadre où l'exigence métier respecte ton équilibre de vie. Notre processus de sélectionÉchange introductif avec un chargé de recrutement. Entretien métier avec évaluation approfondie (Cas pratique d'analyse fonctionnelle sur un besoin IFRS 17, conception d'un pipeline Spark/Databricks sous Python/Scala et requêtes SQL d'optimisation). Rencontre finale pour validation du fit et projection sur la mission. Prêt à rejoindre une équipe d'experts engagés ? N'hésite plus, rejoins la Storm Team ! Storm Group encourage une culture inclusive et multiculturelle où la diversité des profils nourrit notre intelligence collective. En rejoignant la Storm Team, tu intègres un écosystème engagé qui place le développement de tes talents au cœur de sa stratégie, tout en agissant concrètement pour la solidarité et la réduction de l'empreinte environnementale, aussi bien au sein de nos bureaux que dans les projets d'envergure que nous menons chez nos clients.

Data Owner, domaine logistique. Dans le cadre d'une mission longue basée à Lille (hybride), le titulaire est responsable de la connaissance, de la qualité et de l'accessibilité des jeux de données liés aux processus logistiques critiques. Il/elle définit les données, documente fonctionnellement les éléments de données, identifie et formalise les cas d'usage métier associés, et agit comme point d'entrée pour tous les sujets relatifs à ces données. Il/elle élabore une roadmap et une vision pour ses données, met en place et pilote des métriques de qualité (SLA, leadtimes, données de réception entrepôt, etc.), anime des plans d'action en coordination avec les équipes Engineering, Product, Business et Data, et veille à l'accessibilité des données au sein du datalake. Le poste requiert une autonomie forte et une capacité à traduire les besoins métiers en règles de données opérationnelles. Le rôle implique également de faire le lien entre les enjeux techniques et les équipes en charge de l'exploitation des données. Abonnez-vous à la page NaxoTech sur LinkedIn pour découvrir nos offres régulières

Au sein de la Data Tribe, vous participez à la conception, au développement et à l'exploitation de produits Data au service des équipes métier et des utilisateurs de la plateforme stratégique. L'équipe travaille à l'intersection de la Data Engineering, de l'Analytics et des plateformes Data, avec un fort enjeu autour de la fiabilité, de la performance et de la mise en production des solutions. La plateforme Data repose principalement sur Databricks et PySpark. Vous intervenez sur l'ensemble du cycle de vie des produits Data, de la compréhension du besoin métier jusqu'à leur exploitation en production. Vos missions En tant que Senior Data Engineer, vous serez notamment amené(e) à : Concevoir, développer et maintenir des pipelines Data robustes et industrialisés. Traduire les besoins métier en solutions Data scalables, performantes et maintenables. Travailler en étroite collaboration avec les Product Owners, équipes métier et équipes Analytics. Garantir la qualité, la fiabilité et la performance des données en production. Assurer le monitoring des pipelines et contribuer à la résolution des incidents. Identifier et mettre en œuvre des améliorations sur les modèles de données et les processus Data. Contribuer aux standards d'architecture, aux bonnes pratiques et aux décisions techniques. Participer aux revues de code et à l'amélioration continue des développements. Intervenir dans un contexte multi-BU, notamment sur le partage et la sécurisation des données avec des mécanismes de RLS / CLS. Prendre progressivement le rôle de référent Data Engineering sur un domaine métier.

Leader mondial de l'Ingénierie et du Conseil en Technologies, ALTEN réalise des projets de conception et d'études pour les grands comptes industriels, télécoms et tertiaires (les Directions Techniques et les Directions des Systèmes d'Information). Désormais présent à travers 30 pays, le Groupe ALTEN a réalisé un chiffre d'affaires de 4,07 milliards d'euros en 2023 et compte actuellement 57 000 collaborateurs, dont 90% sont des ingénieurs. Labélisé "Top employeur" 2023, ALTEN est un acteur majeur du recrutement d'ingénieurs en France et dans le monde.

Dans le cadre du développement et de l'évolution de sa plateforme Data, notre client recherche un Senior Data Analyst pour rejoindre son équipe IT EDM. Vous interviendrez sur la conception, l'implémentation et la maintenance des fonctionnalités avancées des applications DataHub, ainsi que sur l'amélioration continue de l'écosystème Data. Missions : - Analyser les besoins métiers et proposer des solutions techniques adaptées. - Concevoir et rédiger les spécifications fonctionnelles et techniques. - Coordonner les équipes de développement, de tests et les parties prenantes. - Piloter les projets de la conception jusqu'à la livraison. - Assurer le suivi des délais, budgets et qualité des livrables. - Collaborer avec les équipes métiers et IT. - Assurer le support applicatif et résoudre les incidents liés aux données et reportings. - Accompagner les utilisateurs et contribuer à l'amélioration continue des solutions existantes. Environnement technique : DataHub, Bloomberg, Markit, Adjuto, Salesforce, Databricks, Azure Logic Apps, RabbitMQ et applications internes.

Bonjour, Pour le compte de notre client on cherche e Tech Lead Data Product est en charge sur les périmètres de Data Product dont il a la charge : • Coordonner la conception des développements (pipelines, transformations, …) et de la plateforme (logiciel et infrastructure) en conformité avec les standards de l'entreprise (cybersécurité, architecture…) avec les équipes de Gouvernance. • Intervenir comme expert technique et mentor auprès des équipes (développeurs et/ou DevOps, Product Owners…) durant les phases de développement, d'intégration, de déploiement et d'exploitation. • Définir les standards de développement et les bonnes pratiques, valider l'intégration et la conformité des composants tiers, s'assurer de l'application des meilleures pratiques (respect des standards, qualité du code, bonnes pratiques de développement…). Planifier et superviser les sprints de développement. • Définir et mettre en œuvre les stratégies de tests, participer aux revues de code et aux tests. • Garantir la documentation technique et fonctionnelle, ainsi que la préparation opérationnelle. Assurer la sécurité et la performance des développements de de la plateforme, sa maintenabilité et sa résilience, en soutien au Delivery Lead. • Assurer une veille technologique active, proposer et mettre en œuvre des solutions innovantes pour améliorer les produits. Estimer les coûts et les délais pour l'industrialisation, la conformité, le passage à l'échelle et le déploiement. Promouvoir la culture FinOps au sein de l'équipe afin de mettre en œuvre le FinOps by design. • Construire et faire évoluer la feuille de route technique, en cohérence avec les priorités métier. • Piloter la mise en place des outils de monitoring applicatif et infrastructure. • Contribuer activement à la résolution d'incidents techniques complexes et accompagner la gestion du changement. • Traduire les besoins des parties prenantes en exigences techniques et inversement. Compétences demandées : AWS: Confirmé GITHUB: Avancé DATABRICKS: Confirmé Microsoft Azure: Confirmé Github Copilot: Avancé DEVOPS: Confirmé

Nous recherchons un Cloud Data Engineer pour participer à la conception et à l'évolution d'une plateforme de données cloud moderne, destinée à soutenir les besoins croissants de l'entreprise en matière de données, d'analytique et de reporting. Vous rejoindrez une équipe d'ingénierie dynamique et collaborative, en charge de l'un des programmes technologiques les plus stratégiques de l'organisation. Votre équipeVous intégrerez une équipe de Data Engineers passionnés par la création de solutions de données performantes, évolutives et fiables. L'équipe est responsable du développement des fondations data permettant la mise en place de capacités analytiques avancées, de reporting et de produits de données à grande échelle. Vous collaborerez étroitement avec les équipes Data Platform, Data Ingestion, BI ainsi qu'avec les différents métiers afin de fournir des données fiables, accessibles et à forte valeur ajoutée pour l'ensemble de l'entreprise. Le poste est basé à Stockholm. Vos responsabilitésConcevoir, développer et maintenir des pipelines de données et des transformations de données à l'aide de Azure Databricks, dbt, PySpark et Python. Construire et maintenir des modèles de données robustes pour répondre aux besoins d'analyse, de reporting et des applications métiers. Orchestrer et automatiser les flux de données via Databricks Workflows, Apache Airflow et Azure Data Factory. Garantir la qualité, la fiabilité, la performance et la scalabilité des données sur l'ensemble de la plateforme. Mettre en place des capacités d'observabilité et de monitoring afin d'assurer le suivi et la validation des données. Contribuer à l'automatisation et à l'amélioration continue grâce aux pratiques CI/CD et aux standards d'ingénierie. Collaborer avec les développeurs, architectes, ingénieurs plateforme et parties prenantes métiers pour délivrer des solutions data à forte valeur. Participer activement à la vie de l'équipe, aux cérémonies Agile et au partage de connaissances afin de contribuer à une culture d'excellence. Votre profilNous recherchons un Data Engineer expérimenté possédant une solide expérience dans la conception, le développement et l'exploitation de pipelines de données au sein de l'écosystème Azure. Le poste est fortement orienté Data Engineering et développement de pipelines, plutôt que sur les aspects infrastructure ou administration de plateforme. Vous appréciez le travail en équipe, êtes à l'aise dans des environnements collaboratifs et savez interagir avec des interlocuteurs aussi bien techniques que métiers. La maîtrise du suédois est un plus, ou une volonté de développer cette compétence. Compétences requisesExcellente maîtrise de SQL, Python et PySpark. Expérience significative dans le développement de solutions data sur Azure Databricks. Bonne maîtrise de dbt pour la transformation, la modélisation, les tests et la documentation des données. Expérience avec des outils d'orchestration tels que Apache Airflow et/ou Azure Data Factory. Bonne compréhension des pratiques CI/CD et de l'automatisation des déploiements de pipelines de données. Connaissance des principes de gouvernance des données : qualité, traçabilité, gestion des accès et utilisation de Unity Catalog. Expérience de la création et de la maintenance de pipelines de données et de produits data en environnement de production. Compétences appréciéesExpérience avec Microsoft Fabric ou d'autres plateformes Data SaaS modernes. Expérience dans des environnements cloud d'envergure. Bonne compréhension des architectures data modernes et des plateformes analytiques cloud-native. Cette opportunité s'adresse à un Data Engineer souhaitant contribuer à la construction d'une plateforme de données moderne au sein d'un environnement technologique innovant et à fort impact métier.

Astrelya est un cabinet de conseil franco/suisse, en très forte croissance depuis sa création en 2017, spécialisé dans la transformation digitale, l'excellence opérationnelle et l'innovation technologique. Il est composé de 300 expert passionnés. Le cabinet accompagne ses clients sur l'ensemble du cycle de transformation, depuis la phase de cadrage jusqu'à la mise en œuvre opérationnelle, avec une expertise forte en Data/IA, Cloud, DevOps et méthodes agiles. Astrelya se distingue par un modèle fondé sur la proximité, la confiance et une culture humaine forte, qui place les collaborateurs au cœur de la création de valeur. Dans le cadre de notre développement, nous recherchons pour un client dans le domaine de la mobilité un Consultant Tech Lead DevOps Senior AWS Databricks Vous interviendrez sur une plateforme hébergée sur AWS, sur les outils de CI/CD et sur Databricks. Missions Administrer les plateformes et assurer leur maintien en conditions opérationnelles (MCO) ainsi que le run du socle. Faire évoluer la plateforme en la développant, en la robustifiant et en la simplifiant. Elle doit répondre aux besoins métiers, à la conformité réglementaire, aux exigences RSE et à la stratégie data du groupe. Intégrer des applications externes, souvent en SaaS. Respecter les exigences de la DSI : cybersécurité, performance, maintenabilité, résilience et maîtrise des coûts (FinOps). Profil : Une expérience de plus de 10 ans DevOps et Data 5 ans minimum sur DevOps Cloud en environnement Databricks Certification AWS Sécurisation d'un socle Big Data (profil hybride Data Engineer / DevOps) 10 ans en administration, déploiement et orchestration sur cloud public AWS Terraform CI/CD, GitLab CI de préférence Gestion d'incidents de production niveau N3 Outils de sécurité et de monitoring, gestion des logs Pourquoi rejoindre Astrelya ? Une gestion de carrière sur mesure. Un accompagnement par un manager dédié. Une politique active de formations / certifications (technique, métier, leadership). Une offre variée de missions innovantes et ambitieuses. Des primes de cooptation intéressantes. Un partenariat avec un réseau de crèches. 2 à 3 jours de télétravail par semaine. Des événements corporate (afterworks, événements, teambuilding). Cette annonce vous correspond ? Postulez ! Tous nos postes sont ouverts aux personnes en situation de handicap.