Find your next tech and IT Job or contract Data Engineering

La mission consiste à intervenir en tant que Data Engineer dans le cadre d'un projet de bascule vers une architecture Data Lakehouse autour de Snowflake pour un acteur du secteur transport. Le consultant participera à l'évolution d'un DataHub existant vers un modèle cible Lakehouse, avec la mise en place de nouvelles zones data telles que Landing Zone, Data Lake, Datamarts et Data Products. Il contribuera à la migration des flux existants, à l'industrialisation des pipelines, au décommissionnement progressif de Talend, ainsi qu'aux développements liés aux demandes évolutives sur le périmètre data existant.

Nous recherchons un profil Data Engineer afin d'intervenir au sein de l'Analytics Factory, dans le cadre du renforcement et de l'évolution de la couche sémantique universelle de la plateforme Data. Description and Location L'Analytics Factory conçoit et développe les services analytiques permettant de fournir aux équipes métier des données et analyses fiables afin de soutenir la transformation analytique et la prise de décision. La prestation consiste à renforcer et enrichir la couche sémantique universelle afin de simplifier, accélérer et démocratiser l'accès à une donnée fiable en self-service pour l'ensemble des métiers. Le consultant évoluera dans un environnement moderne basé sur GCP, BigQuery, AtScale et l'IA Agentique. Les principales activités seront : Enrichissement, optimisation et gouvernance de la couche sémantique. Développement d'outillages et d'architectures facilitant le self-service et l'intégration avec les outils BI, les automatisations et les agents conversationnels. Amélioration continue des modèles de données et de la qualité de service. Documentation technique et suivi des métadonnées. Livrables attendus Extension de la couverture de la couche sémantique via l'intégration de nouvelles sources de données. Modèles et requêtes SQL / BigQuery optimisés. Scripts d'automatisation et outillages Python (CI/CD). Documentation technique et fonctionnelle. Support et maintien en condition opérationnelle des usages. Compétences requises Must Have Excellente maîtrise de BigQuery et SQL avancé. Maîtrise de Python et du développement d'automatisations data. Solide expérience sur les architectures Cloud GCP. Modélisation de données et optimisation de Datamarts. Nice to Have DBT pour la transformation et l'orchestration des données. GitLab CI/CD, Docker Compose. Pub/Sub et flux temps réel. Git. Méthodologie Agile / Scrum.

Nous recherchons un(e) Data Engineer H/F en CDI sur Lyon capable de trouver des solutions innovantes et robustes à l'ensemble des problématiques Data. Vous aurez la charge de : • Participer à la conception et réalisation d'une solution Data depuis l'acquisition jusqu'à l'exploitation de la donnée en accompagnant la réflexion des directions métiers • Identifier, collecter et intégrer les données nécessaires à la résolution de problématiques métier et opérationnelles • Garantir la qualité des données en mettant en place les outils de mesure et de suivi adéquats en appliquant les règles de Data Gouvernance et de Data Management • Transcrire des besoins métier en règles de gestion data • Industrialiser le déploiement de vos réalisations à travers l'implémentation de tests unitaires, d'intégration et de non-régression Référence de l'offre : 9qqln2qz3p

La mission porte sur des activités de data engineering au sein d'une data fabrique. Le périmètre couvre l'ingestion de fichiers, l'analyse fonctionnelle de données, le paramétrage et le développement Informatica, ainsi que la mise en place et l'alimentation du Data Warehouse. L'environnement technique comprend SQL, KSH, Hive/Oracle et Informatica PowerCenter. Missions : - Réceptionner les contrats d'interface - Ingérer les fichiers dans la data fabrique - Analyser fonctionnellement les données - Préparer les fichiers de paramétrage - Paramétrer les traitements - Développer sous Informatica PowerCenter - Mettre en place et alimenter le Data Warehouse - Préparer les livraisons via OGC et GitLab - Mettre les développements en recette - Analyser les incidents - Corriger les incidents Profil attendu : Le profil recherché est un Data Engineer confirmé avec une expertise sur Oracle, SQL Azure et Informatica MDM. Une expérience sur Informatica PowerCenter et DBT est attendue.

Contexte Dans le cadre des activités Data de la R&D Michelin, nous recherchons un Data Engineer Référent au sein du domaine DOTI / BS / RD / Analytics. Le rôle consiste à construire, transformer et fiabiliser les données afin d'alimenter les produits numériques utilisés par la Recherche & Développement, tout en jouant un rôle de leader technique et coach auprès des autres Data Engineers. L'environnement est en Agile à l'échelle (SAFe), avec des équipes proches des métiers. Positionnement Équipe : Data – Domaine Analytics R&D Rôle : Data Engineer Référent (Leader technique) Collaboration avec : Tech Lead du domaine Feature Teams DORD Data Engineers Niveau attendu : Leader / Coach (IS3) Missions principalesData Engineering Concevoir et développer des pipelines de données : intégration transformation nettoyage Connecter les systèmes sources et structurer les flux de données Mettre à disposition des données exploitables pour les produits Data Développement & intégration Développer des traitements en : Python Talend DI ponctuellement Java Spring Boot Intégrer les développements dans les pipelines CI/CD Participer à la gestion des versions (GitLab) Qualité & tests Réaliser : tests unitaires automatisés tests de qualification Rédiger les plans de tests Garantir la qualité et la fiabilité des données Documentation Rédiger la documentation : technique fonctionnelle Formaliser les modèles de données et les flux Support & maintien en conditions opérationnelles Assurer le support niveau 3 sur les flux Data (DataLake D1) Analyser et corriger les incidents Participer à l'amélioration continue des traitements Référent technique & coaching Accompagner les Data Engineers : bonnes pratiques de développement qualité de code industrialisation Contribuer à la montée en compétences de l'équipe Participer à la diffusion des standards techniques

Job title: Data Engineer (Java Skills) Location: London - Hybrid Contract: 6 months, with possibility of extension Clearance: SC Cleared or eligible to obtain SC clearance We are currently recruiting for an experienced Data Engineer with strong Java skills to support a major technology programme based in London. The successful candidate will work within a technical engineering environment, helping to design, build and maintain scalable data solutions and services. The role requires strong hands-on development experience, particularly across Java, Kafka, Kubernetes and Python. Key Responsibilities * Design, develop and maintain scalable data engineering solutions and services. * Develop robust applications and data-processing components using Java. * Build and support event-driven and streaming solutions using Apache Kafka. * Develop and maintain Python-based data processing, automation and integration solutions. * Deploy and support applications and services within Kubernetes environments. * Work with large and complex datasets across distributed systems. * Develop reliable and maintainable data pipelines and integration services. * Support the integration of data across applications, platforms and services. * Troubleshoot technical issues across data pipelines, applications and infrastructure. * Work closely with software engineers, architects, DevOps teams and other technical stakeholders. * Contribute to technical design discussions and engineering best practices. * Ensure solutions are scalable, secure, resilient and suitable for production environments. * Support testing, deployment, monitoring and continuous improvement of engineering solutions. * Produce and maintain appropriate technical documentation. Essential Skills & Experience * Candidates should have strong commercial experience across the following: * Java - strong hands-on development experience. * Apache Kafka - experience developing or supporting Kafka-based messaging, streaming or event-driven solutions. * Kubernetes - experience deploying, managing or supporting containerised applications. * Python - experience developing scripts, applications, APIs or data-processing solutions. * Strong understanding of software and data engineering principles. * Experience working with distributed systems and data integration. * Experience developing reliable, scalable production solutions. * Strong troubleshooting and problem-solving skills. * Experience working within Agile or collaborative engineering environments. * Ability to communicate effectively with both technical and non-technical stakeholders. Desirable Experience * Experience in any of the following would be beneficial: * Cloud platforms such as AWS, Azure or GCP. * Docker and containerised environments. * CI/CD pipelines and automated deployment. * REST APIs and microservices. * SQL and relational or NoSQL databases. * Data streaming and real-time processing. * Infrastructure-as-Code or DevOps tooling. * Working within large-scale enterprise or public-sector technology programmes. Due to the nature and urgency of this post, candidates holding or who have held high level security clearance in the past are most welcome to apply. Please note successful applicants will be required to be security cleared prior to appointment which can take a minimum 10 weeks. LA International is an award-winning partner of choice for many of the world's most influential companies and government organisations. Holding Enhanced Government Security Accreditation, we are recognised as the European market leader in the delivery of Security Cleared talent to organisations that demand the very highest levels of security, compliance and assurance. An award-winning organisation, having secured the prestigious Queens Award for Enterprise: International Trade over multiple years. We are committed to fostering an inclusive, equitable and accessible workplace where everyone feels valued and supported. We welcome applications from all individuals, regardless of background or identity, and we encourage candidates who may not meet every listed requirement to still apply. If you require any adjustments or support during the recruitment process, please let us know and we will work with you to ensure a fair and accessible experience. Please Note: If a high volume of applications is received, only candidates shortlisted will be contacted.

Dans le cadre de la réalisation d'un projet en assistance technique, nous recherchons un(e) Data Engineer pour l'un de nos clients du secteur aéronautique. Vous interviendrez sur le site client situé dans les Hautes-Pyrénées (65). Vos missions seront les suivantes : - Développer des évolutions de notre plateforme permettant de récolter et distribuer les données d'activité en vue de permettre la construction de produits de données : .dbt ; snowflake ; power BI ; streamlit : azure ; - Réaliser des travaux de data engineering (scriptes, modélisations, …) pilotés en DevOps (via la solution Azure DevOps) par le Lead Data Engineer du périmètre concerné ; - Compléter toutes les documentations IT obligatoires : CDM, HLD (high level Design du système), DAT (dossier d'architecture technique), DEX (dossier d'exploitation) ; - Prendre en charge et corriger des incidents liés à ces composants après livraison.

Contexte de la mission Au sein de la DSI France, le département SI METIER & DATA souhaite renforcer sa capacitée à réaliser des projets Data. Au sein de l'équipe Data et de l'équipe projet, le Data Engineer réalise les intégrations de données, les traitements et les reportings dans PALANTIR Foundry. Il propose et recherche les meilleurs solutions techniques en collaboration avec l'équipe projet et participe au suivi quotidien des flux de données. Le projet concerne en particulier le traitement de données de consommations IT.

En lien avec l'équipe de production applicative / DevOps, vous serez en charge de la mise en œuvre technique des demandes métier dans le cadre du projet DataOps. Vous interviendrez sur l'ingestion, la préparation et la transformation des données ainsi que sur l'évolution des pipelines au sein de l'environnement GCP. Votre rôle Ingestion et transformation des données · Mettre en œuvre de nouvelles ingestions de données dans Cloud Storage et BigQuery · Développer les traitements de préparation et de transformation des données · Développer et maintenir les traitements en Python et SQL, notamment avec Pandas et/ou Dask · Intervenir sur les traitements distribués s'appuyant sur Spark lorsque nécessaire Développement et évolution des pipelines · Maintenir et faire évoluer les outils de gestion des pipelines de données · Développer et maintenir les scripts Bash nécessaires à leur exécution · Assurer le suivi et l'ordonnancement des traitements avec les outils du périmètre, notamment Control-M · Analyser et résoudre les problématiques techniques liés aux traitements et aux pipelines Evolution de la plateforme Data · Identifier les besoins d'évolution de la plateforme liés aux traitements et pipelines de données · Rédiger les spécifications techniques nécessaires aux évolutions mises en œuvre · Formaliser et transmettre à l'équipe DevOps les demandes relatives aux évolutions de la plateforme ________

Drive measurable change by shaping and delivering large-scale data products and platforms using Palantir Foundry and cloud-native tooling. In this role you'll engineer scalable pipelines, transform complex datasets into operational decision-making assets, and partner with clients to unlock efficiency and insight across critical programmes. You'll join multi-disciplinary teams where pragmatic ownership, creative solutioning and strong technical craft translate directly into business outcomes—building reusable patterns, improving observability and accelerating client roadmaps for modern data adoption. CGI was recognised in the Sunday Times Best Places to Work List 2025 and has been named a UK 'Best Employer' by the Financial Times. We offer a competitive salary, excellent pension, private healthcare, plus a share scheme (3.5% + 3.5% matching) which makes you a CGI Partner not just an employee. We are committed to inclusivity, building a genuinely diverse community of tech talent and inspiring everyone to pursue careers in our sector, including our Armed Forces, and are proud to hold a Gold Award in recognition of our support of the Armed Forces Corporate Covenant. Join us and you'll be part of an open, friendly community of experts. We'll train and support you in taking your career wherever you want it to go. Due to the secure nature of the programme, you will need to hold UK Security Clearance or be eligible to go through this clearance. This is a hybrid position.

Au sein d'un grand groupe d'assurance de premier plan, vous rejoignez le pôle d'ingénierie data transverse pour concevoir, industrialiser et maintenir en conditions opérationnelles les pipelines de données alimentant le Datalake d'entreprise : Concevoir et développer les flux d'ingestion et de transformation de la donnée brute vers des modèles optimisés et requêtables par les métiers. Automatiser l'alimentation récurrente du Datalake et garantir la cohérence des couches de stockage (modèle médaillon). Développer les vues métier et les services de restitution (exposition de données, réintégration dans le SI, services de scoring). Garantir l'application des bonnes pratiques de développement (tests unitaires/intégration, CI/CD, documentation, versioning). Assurer le rôle de référent technique auprès de l'équipe pour sécuriser la qualité et la robustesse des livrables.

🏭 Secteurs stratégiques : Asset management 🗓 Démarrage : ASAP PAS DE FULL REMOTE NI SOUS TRAITANCE MERCI 💡 Contexte /Objectifs : Dans le cadre d'un projet au sein d'un client grand compte, nous sommes à la recherche d'un Data engineer avec une expertise sur la suite MSBI. Le profil recherché, Bac + 4/5 idéalement issu d'une école d'ingénieur, aura une expérience au minimum de 7/8 ans. Passionné par le développement, il aura la capacité de travailler en équipe et saura apporter une vraie valeur ajoutée par ses compétences techniques et humaines