Dans le cadre du renforcement d'une équipe Data Platform au sein d'une Digital Factory, nous recherchons un Data Platform & DataOps Engineer confirmé pour contribuer à l'exploitation, à l'industrialisation et à l'évolution de plateformes Data dans un environnement Cloud AWS. Votre rôle sera essentiel pour garantir la disponibilité, la sécurité, la performance et l'automatisation des services Data, tout en accompagnant les équipes Data Engineering, BI et Architecture. Vos principales responsabilités Data Platform & Cloud AWS Administrer et faire évoluer les plateformes Data. Concevoir et maintenir des architectures Cloud scalables, sécurisées et résilientes. Gérer les pipelines d'intégration, les environnements DEV/TEST/PROD et les habilitations. Optimiser les coûts d'infrastructure AWS dans une logique FinOps. DataOps, DevOps & automatisation Industrialiser les traitements et les déploiements Data. Mettre en place et maintenir les pipelines CI/CD. Automatiser le provisionnement des infrastructures avec l'Infrastructure as Code. Standardiser les composants Data et renforcer les tests automatisés. Monitoring & support Assurer le support technique N2/N3 et résoudre les incidents complexes. Mettre en place des outils de supervision, des alertes et des tableaux de bord opérationnels. Analyser les performances et anticiper les besoins en capacité. Sécurité & gouvernance Appliquer les standards de sécurité Cloud et de gestion des accès. Contribuer à la gouvernance, à la qualité et à la documentation des plateformes Data. Participer aux revues d'architecture et aux projets de transformation Cloud.
Dans le cadre du renforcement de son équipe, notre client recherche un Tech Lead Data spécialisé en Snowflake pour piloter la delivery technique de produits Data et accompagner les projets de transformation et de migration des données. Vous interviendrez sur l'ensemble de la chaîne Data, de l'intégration des données dans Snowflake jusqu'à leur exploitation via dbt et les modèles sémantiques BI. Vous serez également responsable de l'industrialisation des développements, de la mise en place des bonnes pratiques techniques et de l'amélioration continue des plateformes Data. Le poste comporte également une dimension d'innovation autour de l'intelligence artificielle et de Microsoft Copilot, notamment pour accompagner la définition de règles de Data Quality dans le cadre de projets de migration SAP ECC vers SAP S/4HANA. Pilotage technique et delivery Data Piloter la réalisation technique des produits Data et accompagner les équipes dans les développements. Définir et faire appliquer les standards de développement, les bonnes pratiques et les règles de qualité du code. Réaliser les revues de code et garantir la qualité des livrables. Mettre en place et améliorer les processus CI/CD et les mécanismes d'industrialisation. Assurer le suivi des performances, de la qualité et de la fiabilité des solutions Data. Accompagner et faire monter en compétences les équipes techniques. Expertise Snowflake, dbt et modélisation BI Concevoir et optimiser les architectures Data autour de Snowflake. Piloter la chaîne de transformation des données Snowflake / dbt jusqu'aux modèles sémantiques. Garantir la qualité et la performance des modèles de données. Définir les bonnes pratiques de modélisation Data et BI. Intervenir sur les problématiques de sécurité et de gestion des accès, notamment le Row-Level Security (RLS). Accompagner les équipes sur les développements et les évolutions des environnements Snowflake et Power BI. Data Quality et gouvernance Accompagner le cadrage technique du projet O² sur les sujets de Data Quality. Identifier les contrôles nécessaires et contribuer à la définition des règles de qualité des données. Mettre en place des mécanismes de contrôle, de supervision et de suivi de la qualité des données. Participer à l'amélioration des processus de gouvernance et de fiabilisation des données. Une connaissance de Monte Carlo pour le monitoring et l'observabilité des données serait appréciée. Intelligence artificielle et environnement SAP Accompagner les initiatives autour de Microsoft Copilot et des usages de l'intelligence artificielle appliqués à la Data. Exploiter les capacités de Copilot pour faciliter la définition et la génération de règles de Data Quality. Intervenir sur des problématiques de qualité et de contrôle des données dans un contexte de migration SAP ECC vers SAP S/4HANA. S'appuyer sur sa connaissance de l'écosystème SAP pour comprendre les structures de données et les enjeux de migration. Maîtriser les techniques de prompting afin de formuler des instructions efficaces et d'exploiter les outils d'IA générative.
Hanson Regan recherche un Junior Data Engineer ((€300 Max)) pour une mission freelance de 12 mois à Clermont Ferrand. Expérience : 2 à 3 ans Compétences requises : Talend : • dbt : • Python • SQL • CI/CD : • Tests et Data Quality En tant que Data Engineer, vos principales responsabilités seront les suivantes : 1. Développement et intégration des données • Concevoir, développer et maintenir des pipelines d'intégration et de transformation de données. • Participer à la collecte, à l'extraction, à la structuration et à la mise à disposition des données provenant de différentes sources. • Développer et maintenir des traitements avec les technologies Python, Talend et dbt. • Contribuer à la conception et à l'évolution des architectures et des flux de données. • Participer à l'industrialisation des traitements et à leur intégration dans les chaînes CI/CD. 2. Qualité et tests des données • Concevoir et mettre en œuvre des stratégies de tests adaptés aux traitements et aux pipelines de données. • Développer et maintenir des tests automatisés : tests unitaires, tests d'intégration et tests de non-régression. • Mettre en place des contrôles de qualité des données : complétude, cohérence, unicité, validité et fiabilité. • Rédiger les plans de tests et réaliser les campagnes de qualification. • Identifier, analyser et corriger les anomalies liées aux traitements ou à la qualité des données. • Contribuer à l'amélioration continue des pratiques de tests et de validation des données. 3. Documentation et collaboration • Rédiger et maintenir la documentation technique et fonctionnelle des développements. • Collaborer avec les Data Analysts, Data Scientists, développeurs et équipes métiers pour comprendre les besoins et proposer des solutions adaptées. • Participer aux cérémonies Agile (SAFe) et contribuer à l'amélioration continue des pratiques de l'équipe. • Être force de proposition sur les bonnes pratiques de développement, d'intégration et de qualité des données. Profil recherché Vous bénéficiez de 2 à 3 ans d'expérience en tant que Data Engineer, idéalement dans un environnement de développement et d'intégration de données. Vous possédez une bonne connaissance de l'écosystème Data et comprenez les différentes étapes du cycle de vie de la donnée : ingestion, stockage, transformation, exposition et exploitation. Compétences techniques attendues : • Data Engineering : bonne compréhension des architectures Data, des pipelines ETL/ELT, des flux d'intégration et des mécanismes de transformation de données. • Talend : expérience dans le développement et la maintenance de traitements d'intégration de données. • dbt : connaissance des mécanismes de transformation, de modélisation et de tests des données. • Python : capacité à développer des scripts et des traitements de données. • SQL : bonne maîtrise du langage SQL et capacité à manipuler des volumes de données. • CI/CD : connaissance des pratiques d'intégration et de déploiement continu. • Tests et Data Quality : expérience ou forte appétence pour l'automatisation des tests, la validation des données et la mise en place de contrôles qualité. Qualités personnelles • Rigueur et exigence sur la qualité et la fiabilité des données produites. • Esprit analytique et capacité à investiguer et résoudre des problèmes techniques. • Curiosité et envie de développer ses compétences sur les technologies et pratiques Data. • Capacité à travailler en équipe et à collaborer avec des interlocuteurs aux profils variés. • Autonomie, pragmatisme et force de proposition. • Sensibilité particulière aux bonnes pratiques de développement, à la qualité logicielle et à l'amélioration continue. Conformément aux exigences du client, les freelances doivent pouvoir travailler via leur propre entreprise. Nous n'acceptons malheureusement pas les candidatures via des sociétés de portage salarial pour ce poste. Si cette opportunité vous intéresse, veuillez nous contacter au plus vite.
Au sein de l'équipe Marketing Data du pôle Data Fabric, vous intervenez comme consultant Data Engineer senior ou expert. Vous prenez en charge, de manière autonome, la conception, le développement, l'industrialisation et l'exploitation de produits et de pipelines de données dans un environnement Lakehouse sur AWS. Votre objectif est de garantir des traitements fiables, performants et maintenables, tout en contribuant à la maîtrise de leur exploitation quotidienne. Vous développez des transformations avec Spark et PySpark, Python, SQL et dbt, exploitez des données Apache Iceberg et orchestrez les traitements avec Airflow. Vous contribuez au déploiement sur AWS et à l'infrastructure en tant que code avec Terraform. Vous mettez en place des tests, des contrôles de qualité, du suivi et des alertes, et participez à l'analyse des incidents ainsi qu'à la recherche de leurs causes profondes. En lien avec les responsables produit et les interlocuteurs métier, vous traduisez les besoins marketing en solutions robustes. Vous contribuez également à la documentation, au lignage des données, aux contrats de données, au catalogue et aux pratiques d'ingénierie de l'équipe.
Lead Python Data Engineer (H/F) – Projet Data & Analytics Démarrage : ASAP (mission longue jusqu'au 12/11/2027) Localisation : Full Remote (France) TJM cible : Max. 510 € HT (selon profil) Contexte & Rôle Rejoignez un projet Data & Analytics d'envergure pour un acteur majeur international du secteur des services. Poste résolument hands-on : vous codez, concevez et portez les choix d'architecture sur votre périmètre. Missions principales Concevoir, développer et optimiser des data pipelines robustes en Python. Manipuler, nettoyer et transformer des volumes de données complexes (Pandas, NumPy, DataFrames). Appliquer les standards Software Engineering : Clean Code, modularité, CI/CD, tests unitaires et d'intégration. Prendre le lead technique : ownership des solutions, code reviews et accompagnement des Data Engineers plus juniors. Collaborer étroitement avec les équipes Produit, Data Analysts et Data Scientists. Profil recherché Expertise cœur (indispensable) : Maîtrise avancée de Python appliqué au Data Engineering (Pandas, NumPy, SQL, optimisation de performances, Data Quality). Environnement apprécié (non bloquant) : Connaissance de l'écosystème Azure (Data Factory, Data Lake, DevOps), Databricks, PySpark, Delta Lake ou dbt. Posture : Capacité avérée à fédérer techniquement et à garantir l'excellence opérationnelle du code produit.