Find your next tech and IT Job or contract Data Engineering

Concevoir, développer et maintenir des Data Products batch et temps réel. Construire et optimiser des pipelines ETL/ELT. Garantir la qualité, la fiabilité et la gouvernance des données. Collaborer avec les équipes métier, Produit et Data. Participer à la migration Cloud et à la réduction de la dette technique. Mettre en œuvre les bonnes pratiques de testing, documentation et monitoring. Promouvoir l'utilisation responsable des outils d'IA (Copilot, Claude Code, etc.). Participer aux code reviews et au partage de connaissances.

Nous recrutons un(e) Data Engineer / Data Scientist en CDI. Dans le cadre d'un projet de longue durée, nous recherchons un(e) Data Engineer / Data Scientist pour rejoindre une équipe en charge de la conception, du développement et de l'industrialisation de modèles prédictifs. Localisation : Région de Toulouse Contrat : CDI uniquement (pas de freelance) Vos principales missions : Recueillir les besoins auprès des équipes métiers. Concevoir des maquettes et des tableaux de bord. Développer, tester et industrialiser des modèles prédictifs. Développer et industrialiser des outils, des fonctionnalités et des librairies techniques. Profil recherché : Solide expérience en développement Python. Expérience en Data Engineering et/ou Data Science. Expérience dans le développement de modèles prédictifs et de dashboards. Bonne maîtrise de Databricks. Excellentes capacités de communication pour échanger avec les équipes techniques et métiers. Une connaissance de l'environnement avionique, notamment ATA21, est un atout. Ce poste est ouvert uniquement en CDI. Les candidatures de freelances ne seront pas étudiées. Nous recherchons idéalement une personne déjà installée dans la région de Toulouse.

Drive measurable change by shaping and delivering large-scale data products and platforms using Palantir Foundry and cloud-native tooling. In this role you'll engineer scalable pipelines, transform complex datasets into operational decision-making assets, and partner with clients to unlock efficiency and insight across critical programmes. You'll join multi-disciplinary teams where pragmatic ownership, creative solutioning and strong technical craft translate directly into business outcomes—building reusable patterns, improving observability and accelerating client roadmaps for modern data adoption. CGI was recognised in the Sunday Times Best Places to Work List 2025 and has been named a UK 'Best Employer' by the Financial Times. We offer a competitive salary, excellent pension, private healthcare, plus a share scheme (3.5% + 3.5% matching) which makes you a CGI Partner not just an employee. We are committed to inclusivity, building a genuinely diverse community of tech talent and inspiring everyone to pursue careers in our sector, including our Armed Forces, and are proud to hold a Gold Award in recognition of our support of the Armed Forces Corporate Covenant. Join us and you'll be part of an open, friendly community of experts. We'll train and support you in taking your career wherever you want it to go. Due to the secure nature of the programme, you will need to hold UK Security Clearance or be eligible to go through this clearance. This is a hybrid position.

Dans le cadre de la transformation digitale et stratégique de notre client, nous recherchons un(e) Chef de Projet HUB Data (H/F). L'enjeu majeur du projet est de concevoir, cadrer et déployer une plateforme centrale de données (Hub) permettant de centraliser, fiabiliser et redistribuer l'ensemble des données liées aux installations clients. Ce projet structurant constituera le socle de référence unique pour supporter les enjeux de supervision, de pilotage et de performance métier de l'entreprise. Rattaché(e) au Responsable des Projets Stratégiques, vous évoluerez dans un environnement transverse en lien avec la DSI, le pôle Data, les équipes Métiers (commerce, technique, SAV, exploitation) ainsi que les prestataires et intégrateurs externes. Vos Missions Vous piloteriez le projet de bout en bout, du cadrage stratégique jusqu'à la mise en service opérationnelle : Cadrage & Vision : Définir le cadre de pilotage (objectifs, périmètre, planning, budget, gestion des risques et méthodologie). Identifier les cas d'usage prioritaires et le référentiel central de données. Formaliser les livrables clés (note de cadrage, expression des besoins métiers/techniques, roadmap et lotissement). Architecture & Technique : Piloter la conception de l'architecture du Hub (référentiel d'historisation, interconnexion et automatisation des flux). Garantir l'intégration avec les systèmes existants (ERP, CRM, outils métiers). Porter la dimension technique : pilotage des architectures data et des flux (API, batch, temps réel) et garant de la fiabilité / cohérence de la solution. Gouvernance & Déploiement : Coordonner les parties prenantes internes (Métiers & IT) et piloter les prestataires / éditeurs externes. Préparer et animer les instances de gouvernance, le reporting et les arbitrages. Piloter la recette, accompagner la mise en service, l'appropriation par les utilisateurs et l'amélioration continue.

Dans le cadre d'une initiative innovante en phase d'incubation, l'objectif est de concevoir et valider une solution de type plateforme de data et business intelligence dédiée à l'analyse de données complexes. Un POC (Proof of Concept) est en cours pour explorer la faisabilité technique et les usages métiers, incluant une chaîne complète d'ingestion, de traitement et de valorisation des données ainsi que des capacités de simulation. Missions principalesRôle Tech LeadSuperviser une équipe technique pluridisciplinaire (Data Science, Data Engineering, Data Analysis) Structurer et développer les compétences de l'équipe Garantir la qualité, la robustesse et la scalabilité des livrables Piloter la conception de l'architecture globale, notamment orientée systèmes agentiques Orienter les choix technologiques et les bonnes pratiques Assurer la veille technologique et proposer des innovations pertinentes Optimiser la phase exploratoire du POC (rapidité d'expérimentation, pertinence des cas d'usage) Rôle Agentic Data EngineerConcevoir et implémenter des pipelines de traitement de données Intégrer différentes sources de données internes et externes Développer les briques nécessaires à une plateforme data modulaire et performante Participer au développement d'un portail de restitution des données Garantir la maintenabilité, la performance et la qualité des solutions développées Concevoir une architecture orientée agents favorisant l'automatisation et la flexibilité Préparer le passage à l'échelle et une potentielle industrialisation

Contexte Dans le cadre du renforcement d'une plateforme data moderne, l'entreprise recherche un Data Engineer capable de concevoir, développer, déployer et maintenir des pipelines de données robustes dans un environnement cloud. Le poste s'inscrit dans une logique d'industrialisation de la donnée, de fiabilisation des traitements et d'amélioration continue des pratiques DevOps et DataOps. Missions principales Concevoir, développer et maintenir des pipelines de données scalables et performants en environnement cloud. Développer les traitements de transformation et d'automatisation avec SQL et Python. Modéliser les données dans Snowflake et mettre en œuvre les transformations avec dbt. Orchestrer et superviser les workflows de données avec Airflow. Mettre en place des pratiques CI/CD et de versioning avec GitLab afin d'industrialiser les déploiements data. Gérer et automatiser l'infrastructure via Terraform dans une approche Infrastructure as Code. Exploiter les services AWS, notamment S3 pour le stockage et ECS / EC2 pour l'exécution et le déploiement des composants techniques. Collaborer avec les équipes métiers, produit, data et DevOps pour traduire les besoins en solutions data fiables et maintenables. Documenter les pipelines, modèles et traitements afin d'assurer la maintenabilité et la qualité des livrables. Environnement technique Domaine Technologies Langages SQL, Python Data Warehouse Snowflake Transformation dbt Orchestration Airflow Cloud AWS Services AWS S3, ECS, EC2 IaC Terraform DevOps / Versioning GitLab, CI/CD

Our government client is looking for candidates who have at least one production AI/ML implementation, recent experience with AWS data services, Terraform, CI/CD, Python, and SQL. Candidates should have more than five years of overall experience and meet the other requirements outlined in the attached JD. Inside IR35 Monthly travel to Swindon, mostly remote Initial 6 months + extensions Job Purpose: The BI Engineer will be responsible for the requirements analysis and design of solutions for data platform, ETL, integration and analysis solutions. Our toolset includes AWS hosted databases (postgres, S3 based data lake, MySQL, Athena), integration services (AWS API gateway, lambda functions), ETL services (AWS Glue, Step functions, AWS Batch), infrastructure a management tool such as Terraform and extensive use of SQLs and python. Key Responsibilities and Accountabilities: The BI Engineer will be a hands-on data developer to develop and construct complete solution designs to complex application requirements across platforms and data sources: 1. Infrastructure Management: a. Set up and manage data infrastructure, including clusters, servers, and cloud-based resources using Terraform. b. Monitor and optimize system performance, troubleshoot issues, and ensure system availability. 2. Data Architecture and Design: a. Design and implement scalable and efficient data pipelines, databases, and data warehouses. b. Collaborate with data visualization and analysts' teams to understand data requirements and translate them into technical specifications. 3. Data Processing: a. Develop and maintain ETL (Extract, Transform, Load) processes for ingesting data from various sources into the data infrastructure. b. Optimize data processing and storage for performance and cost-effectiveness. 4. AI: a. Develop and deploy AI/ML models into production environments. b. Build scalable inference pipelines and AI APIs. c. Implement MLOps workflows for model versioning, monitoring, and retraining. d. Collaborate with data scientists to productionize machine learning solutions. e. Evaluate and optimize AI model performance and operational efficiency. 5. Database Management: a. Manage and maintain databases, ensuring data integrity, security, and availability. b. Implement database schema changes and optimizations as needed. 6. Collaboration: a. Collaborate with cross-functional teams, including data scientists, analysts, and software engineers, to meet data requirements. b. Communicate effectively with stakeholders to gather requirements and provide updates on data engineering projects. To Achieve this, you will have the following skills: * Comfortable working in an Agile rapidly changing environment * You will be an accomplished developer and BI Engineer, with excellent python skills. * Experience with the infrastructure deployment tool such as terraform, CDK or cloud formation. * Experience developing API based data integration. * Excellent analytic skills associated with working on structured and unstructured datasets. * Excellent SQL experience on various platforms (SQL, PostgresSQL, PL/SQL etc) * Experience of several of MySQL, Oracle, SQL, Postgres, RDS, Aurora, Athena or other similar large scale database technologies. * Experience working with AI framework such as LangChain / LlamaIndex * Experience with Vector databases (Pinecone, Weaviate, FAISS) This is an outline description of the key responsibilities and accountabilities involved in the job. This is not an exhaustive list and the post-holder might be expected to undertake any other duties across the wider directorate, commensurate with the Band and level of responsibility of this post, for which the post holder has the necessary experience and/or training. LA International is an award-winning partner of choice for many of the world's most influential companies and government organisations. Holding Enhanced Government Security Accreditation, we are recognised as the European market leader in the delivery of Security Cleared talent to organisations that demand the very highest levels of security, compliance and assurance. A multiple award-winning organisation, having secured the prestigious Queens Award for Enterprise: International Trade over consecutive years. We are committed to fostering an inclusive, equitable and accessible workplace where everyone feels valued and supported. We welcome applications from all individuals, regardless of background or identity, and we encourage candidates who may not meet every listed requirement to still apply. If you require any adjustments or support during the recruitment process, please let us know and we will work with you to ensure a fair and accessible experience. Please Note: If a high volume of applications is received, only candidates shortlisted will be contacted.

Dans le cadre de notre croissance et de nos projets de transformation digitale, nous recherchons un(e) Senior Data Engineer pour accompagner nos clients dans la conception, le développement et l'industrialisation de plateformes Data modernes. Vous interviendrez sur des projets stratégiques autour des architectures Data Cloud, des plateformes Big Data, des traitements temps réel et de la valorisation des données, dans des environnements techniques exigeants et à forte volumétrie. En collaboration avec les Architectes Data, Data Scientists, Business Analysts, DevOps et équipes métiers, vous participerez à la conception de solutions robustes, évolutives et sécurisées répondant aux enjeux de performance et de gouvernance des données. Vos missionsEn tant que Senior Data Engineer, vous serez amené(e) à : Concevoir et développer des architectures Data évolutives et performantes. Développer, maintenir et optimiser des pipelines de données (ETL / ELT) en mode batch et streaming. Concevoir et exploiter des plateformes Data Lake, Data Warehouse et Lakehouse. Mettre en œuvre des solutions d'ingestion de données issues de multiples sources (API, bases de données, fichiers, IoT, événements temps réel). Développer des traitements distribués pour de forts volumes de données. Industrialiser les traitements Data grâce aux pratiques DevOps et DataOps. Concevoir les chaînes CI/CD des plateformes Data. Garantir la qualité, la traçabilité, la sécurité et la gouvernance des données. Optimiser les performances des traitements et les coûts d'exploitation des infrastructures Cloud (FinOps). Participer à la définition des architectures techniques et aux choix technologiques. Assurer le monitoring, l'observabilité et le support des plateformes Data. Produire la documentation technique et accompagner les équipes dans le partage des bonnes pratiques. Participer aux revues de code et contribuer à l'amélioration continue des plateformes. Selon les projets, vous pourrez également intervenir sur : la définition de référentiels techniques, l'accompagnement des équipes de développement, le mentorat de Data Engineers, ou l'évolution vers un rôle de Tech Lead ou de Data Architect.

Nous allons travailler sur un POC Réseau Autonome d'une durée limitée (approx 6 mois à partir de septembre), l'objectif est de collecter des données réseaux (données config Radio, Kpi, référentielles) les intégrer dans Databricks, développer des API pour requêter ces données afin que des agent IA puissent requêter les données à travers ces API. Livrables: Conception et développement de projets d'intégration de données pour des projets à forte valeur ajoutée. Développement de jobs d'intégration de données en PySpark, Spark, Python en mode streaming et batch sur la plateforme Databricks. La mise en œuvre de CI/CD (github, devops, Databricks Bundles), de l'orchestration, du data management et de la sécurité. Optimisation des jobs et des ressources cloud (GCP et Databricks). Mise en place de de Dashboard Finops afin de suivre l'usage des ressources GCP / Databricks. Travailler au sein d'équipes pluridisciplinaires : chefs de projet, architectes, devops, data engineer. Assurer une formation continue, le partage de connaissances, mise en place de documentation.

SummaryThe primary function of the Data Engineer role is to design, develop, and maintain scalable data pipelines on the Databricks platform to facilitate the energy transition for retail customers in Belgium. This role aims to support the implementation of the Databricks platform within the context of an AWS environment, enabling efficient data processing for various projects. Main Responsibilities:Core duty description: This role involves managing and optimizing data processes to support various business projects. Design, develop, and maintain scalable data pipelines on the Databricks platform. Manage data ingestion processes from various sources into the Databricks environment. Implement and optimize ETL (Extract, Transform, Load) processes to ensure efficient data transformation and integration. Ensure data quality, integrity, and security across all data pipelines. Monitor and troubleshoot data pipeline performance, implementing necessary maintenance and updates. Document data pipeline processes, technical specifications, and best practices. Conduct knowledge transfer to the Data Engineer team responsible for managing the platform in the future. Key Requirements:Strong skills in SQL and relevant programming languages (e.g., Python). Proven expertise in Databricks and AWS services. K.modal expertise in Databricks to support BI activities (Kimball modeling). Analytical mindset with attention to detail. Strong communication and collaboration skills. Nice to Have:Experience in Datawarehouse or Lakehouse projects. Additional programming languages beyond SQL and Python. Experience with data quality management tools. Other Details:Location: Belgium Team Structure: Reporting to a Project Lead and a Tech Lead/Data Architect. Qualifications: Bachelor's degree in Computer Science, Engineering, Mathematics, or a related field. Experience: Minimum 3 years in SQL and Data warehousing, and 2 years with Databricks. Languages: Fluent in Dutch or French and English.

Nous recherchons un Data Engineer pour intervenir au sein de l'équipe cœur et contribuer aux travaux liés au thème Décisionnel. Missions principales : - Coordonner la recette avec les acteurs Migration de Données et Certifications, en tenant compte des contraintes d'environnement - Suivre les alimentations et traitements du décisionnel - Contribuer à l'analyse des anomalies de fonctionnement sur le décisionnel - Remonter l'avancement et les points d'attention du thème - Participer à la rédaction des scénarios de bascule

Entité : Client TJM Max : 500 euros Date de démarrage : ASAP Date de fin : 31/03/2027 Mission : Gouvernance Data & usages Animation de l'organisation Data fédérée de multiples Districts métiers Acculturation Formation Dictionnarisation Qualité de données Le Global Data Office (GDO) est l'équipe centrale Data pour le client au sein de la Direction Data Stratégie, gouvernance, management. Contribuer à la construction de la stratégie Data de la Banque et sa trajectoire de mise en œuvre architecture Data Centric Acculturer et Former les collaborateurs métiers et IT dans une culture data-driven Constituer un « Book de cas d'usages Data et IA permettant d'illustrer la valeur dégagée pour l'entreprise Orchestrer le partage et le référencement de la donnée (Golden source, Data Market Place), Organiser les échanges entre producteurs et consommateurs de données, et préparer les arbitrages nécessaires Construire et proposer, avec les parties prenantes, un catalogue de solution à la pointe de l'innovation (Data visualisation, Data Management, Data Quality, Analytics et IA) Prendre en charge les reporting et préparation des comités Opérationnels et Stratégiques Support au projet BCBS de la banque Une expérience bancaire avérée est appréciable Expérience de gouvernance des données en environnement bancaire réglementaire : BCBS 239/RDARR, CDE, lineage réglementaire, remédiation d'audit Pratique réelle de Collibra (metamodel, asset types, operating model), idéalement en contexte CIB Capacité à produire des livrables normatifs : avis data, cadres de gouvernance, spécifications fonctionnelles

Nous recherchons un Data Engineer pour intervenir au sein de l'équipe cœur et contribuer aux travaux liés au thème Décisionnel. Missions principales : - Coordonner la recette avec les acteurs Migration de Données et Certifications, en tenant compte des contraintes d'environnement - Suivre les alimentations et traitements du décisionnel - Contribuer à l'analyse des anomalies de fonctionnement sur le décisionnel - Remonter l'avancement et les points d'attention du thème - Participer à la rédaction des scénarios de bascule