Trouvez votre prochaine offre d’emploi ou de mission freelance Data Engineering à Lyon

Au sein du domaine Data & AI d'un acteur du secteur retail, le Data Steward agit en tant qu'expert fonctionnel métier et chef de projet, garantissant la réussite des initiatives data sur l'ensemble du cycle de vie de la donnée. Le rôle fait le lien entre les parties prenantes métier et les équipes techniques (Data Engineers et Data Visualization Experts), en veillant à ce que les solutions data soient alignées avec les objectifs business, correctement gouvernées, et livrées avec qualité et clarté. Environnement et missions : - Domaine fonctionnel principal : supply chain et demand planning, avec utilisation de SAP - Pilotage de bout en bout du périmètre et des exigences des projets data - Coordination et gestion de projet entre plusieurs équipes - Interaction avec des interlocuteurs techniques et non techniques - Réalisation de requêtes de validation de données et analyse pour assurer l'alignement entre besoins métier et livrables techniques - Identification des risques, anomalies et incohérences, et pilotage de leur résolution - Maintien d'une documentation structurée et d'artefacts projet rigoureux - Discipline de gouvernance et attention au détail - Travail en environnement Agile avec des équipes transverses (business, data engineering, analytics) La maîtrise du français est obligatoire.

Dans le cadre d'une transformation Data-centrique du Système d'Information, notre client recherche un Architecte Technique Cloud & Data pour intervenir sur des programmes stratégiques pluri-annuels à fort enjeu. Vous accompagnerez les architectes et urbanistes fonctionnels dans la réalisation de dossiers d'études et de benchmark, dans le choix de solutions et d'architectures fonctionnelles, ainsi que dans la définition des trajectoires et cibles applicatives. Vous contribuerez à la conception et au contrôle de l'architecture applicative, technique et infrastructure sur les projets clients. Vous serez responsable de définir et faire évoluer la trajectoire des solutions et architectures techniques en étroite collaboration avec les équipes supports aux développements et l'ingénierie des infrastructures. Vous participerez également à des études exploratoires et expérimentations sur de nouvelles technologies ou solutions dans un contexte Cloud et Data.

En tant que Tech Lead, vous êtes l'expert Data Engineering et le référent technique dans vos missions. Vous intervenez principalement sur les problématiques d’ingestion, de traitement et d’industrialisation des données sur la data plateforme. Sans être responsable de l’architecture Data globale, vous avez un rôle clé dans la qualité des livrables, la standardisation des pratiques et la montée en compétence des Data Engineers. Expérience attendue : 7 à 12+ ans en Data Engineering avec une expérience dans un rôle de référent technique Vous correspondez au/à la Tech Lead que nous recherchons si : Vous disposez d’un leadership technique , reconnu et légitime auprès des équipes Vous savez animer, encadrer et fédérer une équipe autour de bonnes pratiques techniques et d’objectifs communs Vous faites preuve d’une excellente communication , associée à une forte capacité pédagogique Vous adoptez un esprit critique constructif et savez challenger les choix techniques dans une logique d’amélioration continue Vous êtes capable de prendre du recul sur des problématiques techniques afin de proposer des solutions pertinentes et durables Vous êtes autonome , proactif et doté d’un fort sens des responsabilités Vous favorisez le partage de connaissances et la montée en compétence collective Vous savez collaborer efficacement avec des rôles transverses (Architectes, Product Owners, DevOps, ML Engineers) Vous maîtrisez Python et SQL à un niveau avancé , avec une forte sensibilité aux bonnes pratiques de software engineering (qualité, maintenabilité, testabilité) Vous êtes capable de définir, documenter et faire appliquer des standards de développement , incluant la structuration des projets, les conventions de code et les stratégies de tests Vous avez une expérience significative dans la mise en place et la maintenance de chaînes CI/CD appliquées aux pipelines Data Vous portez une attention particulière à la qualité des données , à la testabilité et à l’ observabilité des pipelines en production Vous pratiquez régulièrement les revues de code , le mentoring et l’accompagnement technique des Data Engineers Vous êtes en mesure de concevoir des frameworks internes et des briques techniques réutilisables afin d’industrialiser et standardiser les développements Vous comprenez les enjeux de performance, de scalabilité et de maîtrise des coûts , et savez les intégrer dans vos choix techniques

Dans le cadre d’un programme stratégique de transformation Data, notre client renforce son équipe avec un(e) Lead Data Engineer spécialisé(e) sur l’écosystème Databricks. L’objectif est d’accompagner la mise en place d’une nouvelle plateforme de données moderne, capable de répondre aux enjeux de performance, de gouvernance, de qualité et de valorisation de la donnée. Vous interviendrez sur des projets structurants autour de l’industrialisation des flux de données, de la modélisation des référentiels analytiques et de la diffusion des données vers les outils décisionnels. Vos missions: Concevoir, développer et industrialiser des pipelines de données sur Databricks et Spark. Participer à la définition et à la mise en œuvre du modèle de données cible. Structurer les flux de données afin de garantir leur qualité, leur cohérence et leur performance. Contribuer à l’exposition et à la valorisation des données auprès des équipes BI et des utilisateurs métiers. Définir et mettre en place les standards de développement, de qualité et d’industrialisation. Mettre en œuvre les pratiques de tests automatisés et les processus CI/CD. Participer aux travaux de migration et de transformation de la plateforme Data. Accompagner les équipes sur les sujets techniques liés à Databricks et aux architectures Lakehouse. Contribuer à l’amélioration continue des solutions et des méthodes de travail. Assurer un rôle de référent technique sur les problématiques Data Engineering.

A LIRE ATTENTIVEMENT AVANT DE POSTULER ⬇ 🏠 2 à 3 jours de télétravail / semaine - 📍 Lyon - 🛠 Expérience de 5 ans minimum Envie de participer à la construction d'une plateforme Data stratégique à grande échelle ? 🚀 Dans le cadre de notre développement, nous recherchons actuellement un.e Architecte Data pour intervenir chez l'un de nos clients. 💻💼 Contexte : Vous rejoindrez un programme majeur de transformation Data visant à moderniser et industrialiser une plateforme décisionnelle de nouvelle génération. Vous participerez à la migration, la structuration et l'industrialisation d'un environnement Data reposant sur Databricks, Spark et Power BI Voici un aperçu détaillé de vos missions : 🎯 - Concevoir, développer et maintenir des pipelines Data sous Databricks et Spark - Développer les traitements en Python, PySpark et SQL - Participer à la définition et à la mise en œuvre du modèle de données cible - Industrialiser les pipelines Data (CI/CD, tests, déploiements) - Mettre en place des traitements robustes, maintenables et performants - Orchestrer les flux de données via Databricks Workflows - Garantir la qualité, la fiabilité et l'observabilité des traitements - Participer au suivi de production et à la résolution des incidents - Contribuer aux choix d'architecture et aux standards de développement - Accompagner les équipes dans l'adoption des bonnes pratiques Data Engineering - Participer à l'amélioration continue de la plateforme et des processus de développement - Collaborer avec les équipes Data, BI, Product Owner et métiers

A LIRE ATTENTIVEMENT AVANT DE POSTULER ⬇ 🏠 2 à 3 jours de télétravail / semaine - 📍 Lyon - 🛠 Expérience de 5 ans minimum Envie de participer à la construction d'une plateforme Data stratégique à grande échelle ? 🚀 Dans le cadre de notre développement, nous recherchons actuellement un.e Architecte Data pour intervenir chez l'un de nos clients. 💻💼 Contexte : Vous rejoindrez un programme majeur de transformation Data visant à moderniser et industrialiser une plateforme décisionnelle de nouvelle génération. Vous participerez à la migration, la structuration et l'industrialisation d'un environnement Data reposant sur Databricks, Spark et Power BI Voici un aperçu détaillé de vos missions : 🎯 - Concevoir, développer et maintenir des pipelines Data sous Databricks et Spark - Développer les traitements en Python, PySpark et SQL - Participer à la définition et à la mise en œuvre du modèle de données cible - Industrialiser les pipelines Data (CI/CD, tests, déploiements) - Mettre en place des traitements robustes, maintenables et performants - Orchestrer les flux de données via Databricks Workflows - Garantir la qualité, la fiabilité et l'observabilité des traitements - Participer au suivi de production et à la résolution des incidents - Contribuer aux choix d'architecture et aux standards de développement - Accompagner les équipes dans l'adoption des bonnes pratiques Data Engineering - Participer à l'amélioration continue de la plateforme et des processus de développement - Collaborer avec les équipes Data, BI, Product Owner et métiers

Secteur : Retail Contexte et enjeux Le Data Steward intervient au sein du domaine Data & AI en tant qu'expert fonctionnel et chef de projet, garantissant le succès des initiatives data sur l'ensemble du cycle de vie. Il assure le lien entre les parties prenantes métier et les équipes techniques (Data Engineers et Data Visualization Experts), en veillant à ce que les solutions data répondent aux objectifs métier, soient correctement gouvernées et livrées avec qualité et clarté. Environnement technique et type de projet Projets Data Digital & Marketing et projets Data E-commerce. Activités incluant la définition et la gestion du périmètre et des exigences de projets data de bout en bout, ainsi que des requêtes de validation de données. Méthode de travail Environnement Agile avec équipes cross-fonctionnelles. Forte collaboration entre les équipes métier, data engineering et analytics. Livrables attendus - Cadrage et gestion du scope des projets data - Documentation structurée et artefacts projet maintenus avec rigueur - Identification des risques, problèmes et incohérences, avec pilotage de leur résolution - Coordination et reporting auprès des parties prenantes techniques et non techniques

Almatek recherche pour l'un de ses clients, un Data Scientist senior et IA/machine Learning sur Lyon. Profil recherché : Data Science & Machine Learning • Maîtrise des techniques de ML supervisé et non supervisé • Expérience en NLP : embeddings, analyse textuelle, extraction d’entités, classification de texte • Connaissance d LLM & IA Générative • Expérience intégration LLM • Connaissance des approches RAG, prompt engineering, et fine-tuning • Capacité à travailler avec des modèles LLM fournis par un tiers (FAB IA SNCF) à travers une API standard. Plateforme Databricks & Data Engineering • Maîtrise de Databricks : Unity Catalog, Delta Lake, MLflow, Génie, notebooks et pipelines • Compétences en SQL avancé et Python • Capacité à concevoir et optimiser des pipelines de données et des workflows de traitement

Dans le cadre du renforcement d’une équipe spécialisée dans les projets data à fort enjeu, nous recherchons un(e) Lead Tech orienté(e) Data Engineering / Data Science capable d’intervenir sur des environnements techniques exigeants et de contribuer à la montée en compétence des équipes. Vous évoluerez au sein d’un contexte stimulant, mêlant développement, traitement de données à grande échelle et accompagnement technique. Vos missions Au quotidien, vous serez amené(e) à : Concevoir et développer des solutions de traitement et d’analyse de données en Python Participer à la mise en place et à l’optimisation de pipelines data performants Travailler sur des architectures distribuées et des traitements volumineux via Spark et Hadoop Assurer la qualité, la maintenabilité et la performance des développements réalisés Collaborer avec les équipes techniques et métiers afin de comprendre les besoins et proposer des solutions adaptées Apporter un rôle de référent technique auprès des équipes Participer aux bonnes pratiques de développement, d’intégration continue et de déploiement Accompagner les collaborateurs sur les sujets techniques avec pédagogie et clarté Environnement technique Python Spark PostgreSQL Hadoop Git / GitLab CI/CD

Hello, Pour le compte de l'un de mes clients dans le secteur de l'énergie, je suis à la recherche d'un lead tech orienté Python & Spark. Impératifs : Excellente maîtrise de Python (+ 5 ans) Excellente maîtrise de Spark Maitrise des bonnes pratiques techniques et capacités de leadership technique pour communiquer efficacement et avec pédagogie. Description du profil : Référent technique dans une équipe Agile. Assure la responsabilité d'un ou plusieurs processus techniques. Minimum 5 années d'expérience en développement Python, avec une spécialisation en data engineering ou data science, et une expérience en leadership technique. Compétences attendues sur le profil : - Excellente maîtrise de Python et de ses librairies pour le traitement et l'analyse de données. - Familiarité avec Spark (PySpark ou Scala) pour le traitement de grandes volumétries de données. - Expérience en développement d'API et de dashboards avec FastAPI et Dash. - Bonne connaissance des bases de données SQL, notamment PostgreSQL et Teradata. - Maîtrise des outils de versioning et d'intégration continue, notamment Git et Gitlab CI/CD. - Compétences en gestion d'équipe et en leadership technique. En tant que Lead Tech Data, vous serez responsable de : - Développement d’applications et de traitements orientés data en Python : Création et maintenance d'API, de dashboards et de pipelines pour analyser et visualiser les données. - Maintien de la qualité logicielle : Effectuer des revues de code régulières, promouvoir et diffuser les bonnes pratiques de développement au sein de l'équipe. - Appui aux projets : Fournir une aide ponctuelle et des conseils techniques aux différents projets en cours. - Cadrage technique des sujets : Participer à la définition des besoins techniques et à la planification des solutions à mettre en place. - Échanges transverses avec les autres équipes : Collaborer avec les équipes transverses pour remonter les besoins et implémenter un cadre commun de travail.

Nous recherchons un Tech Lead Data Engineer expérimenté H/F en CDI sur Lyon pour une entreprise de renommée française afin de piloter la conception et l’évolution de notre plateforme data. Vous serez référent technique sur les sujets liés au traitement de données massives, à l’industrialisation des pipelines et à l’optimisation des architectures data. Vous interviendrez dans un environnement moderne orienté Big Data et Cloud, avec une forte utilisation de Python, Spark et des outils d’automatisation CI/CD. 3 jours de Télétravail Missions principales Concevoir et développer des pipelines de données robustes et scalables Encadrer techniquement l’équipe Data Engineering Développer des traitements distribués avec Spark Assurer l’intégration et la transformation de données à grande échelle Optimiser les performances des bases PostgreSQL et des traitements Big Data Participer à l’architecture des solutions Hadoop et Data Lake Industrialiser les déploiements via GitLab CI/CD Garantir la qualité, la sécurité et la fiabilité des données Collaborer avec les équipes Data Science, DevOps et métiers Mettre en place les bonnes pratiques de développement et de gouvernance data