Trouvez votre prochaine offre d’emploi ou de mission freelance Dataform
Ce qu’il faut savoir sur Dataform
Maîtriser Dataform permet d'automatiser la transformation et la gestion des données dans des pipelines cloud. Dataform facilite la collaboration entre équipes en codifiant les workflows data, améliorant ainsi la qualité et la maintenabilité des projets analytiques modernes.
Au sein de l'équipe de la BI RH, intégrer une équipe 5 personnes dédiée aux données BI des ressources humaines La mission consiste à maintenir, faire évoluer ou développer de nouvelles chaines de traitement de la donnée relatives aux ressources humaines uniquement (données gestion administrative, gestion du temps d'activité, de formation, d'évolution …). La mission consiste également à faire évoluer, maintenir ou créer des univers BO, des applications Spotfire ou des modèles sémantiques powerBI. L'environnement est en BI traditionnelle mais en cours de migration dans GCP
Fiche de poste – Senior Data Engineer / Expert Dataplatform (GCP) Contexte & Organisation Le Pôle Data est structuré autour du modèle Spotify : Une Dataplatform en pleine transformation, composée de 4 experts Architectes / Développeurs GCP & BigQuery Maintenance de l'existant + évolution de la plateforme Début d'un chantier majeur de construction début 2025 (v1 en cours, forte ambition d'évolution) Outils & écosystème : GCP (Cloud Run, Cloud Function, Pub/Sub, Vertex AI, BigQuery) Airflow (orchestration) Dataform (concurrent DBT – SQL) Terraform pour le provisioning Modèle Data type médaillon Pratique Data Engineer moderne + enjeux d'observabilité / finops / sécurité Objectifs du poste Renforcer l'équipe Dataplatform avec un profil senior ayant déjà participé à la construction d'une Dataplatform et capable d'accélérer l'industrialisation des pipelines et des outils d'ingestion. Le rôle vise à : Faciliter et accélérer le travail des Data Engineers Améliorer l'expérience de construction de pipelines de données Structurer et fiabiliser l'ingestion et le transfert de données, encore peu industrialisés Apporter une expertise de haut niveau sur GCP & Data Engineering Missions principales 1. Gouvernance & Contrôle de la plateforme Assurer un contrôle global de la Dataplatform et accompagner les Data Engineers dans les bonnes pratiques d'industrialisation. Identifier les axes d'amélioration techniques et proposer des solutions robustes. Participer aux choix d'architecture technique et Data (modèle médaillon). 2. FinOps, Observabilité & Sécurité Définir et mettre en œuvre les standards d'observabilité. Garantir la performance, la robustesse et la sécurité de la plateforme. Suivre les coûts et proposer des optimisations FinOps. Automatiser le provisioning via Terraform. 3. Développement & Industrialisation Concevoir et industrialiser les pipelines : Cloud Run, Cloud Functions, Pub/Sub, Airflow, Vertex AI. Contribuer à résorber la dette technique. Développer et industrialiser les briques d'ingestion et de transformation. 4. Animation & Documentation Participer à la mise à disposition de nouveaux outils et à la documentation associée. Assurer une démarche d'amélioration continue du run. Animer une équipe de Data Engineer chaque vendredi: partage de bonnes pratiques suivi des évolutions de la Dataplatform retours d'expérience et recommandations 5. Innovation & IA Apporter une vision sur l'usage de l'IA (générative et traditionnelle) pour : réduire les coûts améliorer la productivité faciliter le travail des collaborateurs Contribuer à des projets Vertex AI / ML (ambition forte vers l'IA)
Pour le compte d'un acteur majeur du transport aérien, nous recherchons un profil Data Engineer GCP / BI expérimenté pour renforcer les équipes Data dans le cadre d'un projet de migration vers Google Cloud Platform (GCP). Deux périmètres d'intervention sont identifiés : Besoin 1 : Data Engineering – Données opérationnelles aériennes Développement et évolution d'une Data Platform consolidant les données opérationnelles des avions : vols, maintenance, parking, etc. Suivi et analyse des opérations via Power BI. Besoin 2 : BI Data – Ressources humaines Maintien et évolution des chaînes de traitement des données RH. Gestion et évolution des univers BusinessObjects. Maintenance des applications Spotfire et des modèles Power BI. Merci de préciser dans votre candidature le périmètre privilégié (Data Engineering ou BI), votre disponibilité et votre TJM.
Rejoignez l'équipe BI dédiée aux ressources humaines d'un grand groupe, au sein d'une équipe de 5 personnes, pour contribuer à la modernisation de son infrastructure données en migration vers le cloud. Vous participerez à la conception, la maintenance et l'évolution de pipelines de données critiques, tout en pilotant la transition technologique vers une architecture cloud native. Vous serez responsable du développement et de la maintenance des chaînes de traitement de données relatives aux ressources humaines, couvrant des domaines tels que la gestion administrative, la gestion du temps d'activité, la formation et l'évolution professionnelle. Votre mission comprendra l'intégration de données depuis diverses sources, la création de modèles sémantiques robustes, et la garantie de la qualité et de la performance des données exposées aux utilisateurs métier. L'environnement technique combine une infrastructure BI traditionnelle (Business Objects, Informatica, Spotfire, Teradata) avec une migration progressive vers Google Cloud Platform (GCP). Vous travaillerez avec Dataform pour l'orchestration des transformations, BigQuery comme entrepôt de données cloud, et des outils de visualisation modernes. L'équipe fonctionne en méthode Agile et vous intégrerez un collectif axé sur la collaboration, la qualité et l'innovation. Responsabilités : - Concevoir, développer et optimiser des pipelines de données ETL/ELT utilisant Informatica Powercenter et Dataform, garantissant performance et fiabilité - Créer et maintenir des modèles sémantiques Power BI pour l'analyse des données RH, en collaboration étroite avec les utilisateurs métier - Développer et faire évoluer des univers Business Objects et des applications Tibco Spotfire selon les besoins analytiques - Gérer les données dans BigQuery et Teradata, optimiser les requêtes SQL complexes et assurer la performance des traitements - Participer à la migration progressive des processus BI de l'environnement traditionnel vers GCP, en utilisant Cloud Workflows et Cloud Functions - Mettre en place et maintenir les procédures de monitoring et d'alerte des flux de données, assurant la continuité de service - Documenter les architectures de données, les processus et les procédures opérationnelles - Collaborer avec les équipes métier RH pour collecter les besoins et traduire les demandes en solutions techniques Télétravail : 2 jours par semaine Localisation : Toulouse
Nous sommes à la recherche d'un(e) Analytics Engineer pour renforcer l'équipe People Report et piloter la migration vers le Cloud. Vos missions : Migration & Reverse Engineering : Analyser le legacy (SAP Hana) et assurer la transition des flux de données et du corpus de reporting Power BI vers l'écosystème cible Google Cloud Platform (GCP). Cadrage & Nouveaux Usages : Recueillir et cadrer les besoins de la direction RH pour concevoir de nouveaux indicateurs et tableaux de bord décisionnels (effectifs, masse salariale, recrutements, etc.). Expertise BI & Modélisation : Concevoir les modèles de données optimisés, rédiger des mesures complexes en DAX, garantir la sécurité (RLS) et optimiser les performances end-to-end sous Power BI. Industrialisation & Collaboration : Développer les pipelines de transformation (BigQuery, Dataform), appliquer les standards de versioning (Git) et faire le pont entre les équipes techniques (IT) et les métiers RH.
Dans le cadre d'un programme de transformation Data , nous recherchons un Data Engineers GCP confirmé pour participer à la migration complète d'un écosystème Data On-Premise vers Google Cloud Platform. L'objectif est de construire une architecture moderne et cloud-native, capable de traiter d'importants volumes de données tout en répondant à des enjeux de temps réel, de fraîcheur et de qualité des données. Missions * Concevoir et développer des pipelines de données batch et temps réel ; * Migrer les traitements On-Premise vers les services managés de GCP ; * Développer et optimiser les transformations ELT avec BigQuery et Dataform ; * Orchestrer les flux et traitements avec Cloud Composer ; * Déployer des composants serverless avec Cloud Run et Cloud Functions ; * Garantir la qualité, la disponibilité et la fraîcheur des données ; * Participer à l'industrialisation et à l'optimisation de la plateforme Data. Compétences recherchées * Expertise confirmée de Google Cloud Platform ; * Très bonne maîtrise de BigQuery, SQL et Dataform ; * Expérience significative sur Dataflow et Cloud Composer ; * Maîtrise de Cloud Run et Cloud Functions ; * Expérience des architectures Data temps réel ; * Bonne connaissance des problématiques de migration On-Premise vers le Cloud ; * Maîtrise des enjeux de qualité, d'observabilité et de performance des données. Profil attendu Data Engineer confirmé disposant d'une expérience solide sur des projets GCP en production, capable d'intervenir de manière autonome sur la conception, le développement et l'industrialisation de pipelines Data.
Dans le cadre de sa transformation digitale, un groupe international recherche un Tech Lead IA pour industrialiser ses solutions d'intelligence artificielle générative et développer de nouveaux cas d'usage. Vos missions : Concevoir et déployer des architectures IA générative et agentique (LLM, RAG, MCP). Industrialiser les solutions IA : CI/CD, monitoring, sécurité et optimisation des coûts. Développer de nouveaux cas d'usage, du POC à la production. Définir les standards techniques et garantir la qualité des solutions. Encadrer techniquement deux développeurs IA et accompagner les équipes internes. Collaborer avec les équipes Data, DevOps, Infrastructure et Cybersécurité. IA : LLM, RAG, MCP, agents IA, évaluation de modèles. Cloud : AWS Bedrock, Azure AI Foundry, GCP Vertex AI. Data : BigQuery, Dataform, Airflow. DevOps : GitLab CI/CD, monitoring, FinOps. Outils : Claude Code ou équivalent. Savoir-être : Leadership, autonomie, rigueur, pédagogie, esprit d'analyse et force de proposition.
RésuméCe poste d'ingénieur de données GCP consiste à analyser les besoins métier afin de concevoir des solutions adaptées, développer des pipelines de données robustes et collaborer avec diverses parties prenantes pour garantir que les données répondent aux objectifs stratégiques de l'entreprise. Responsabilités :Analyser les besoins métiers et comprendre les impacts business des données. Concevoir et développer des pipelines de données robustes et scalables en utilisant Google Cloud Platform (GCP). Améliorer la performance et la scalabilité des solutions existantes. Collaborer étroitement avec les architectes, PO et Data Analysts. Maintenir une documentation technique précise et complète. Réaliser la recette technique et animer la recette fonctionnelle avec les utilisateurs. Mettre en place et gérer des systèmes de monitoring et d'alerting. Support au déploiement et assurer la maintenance corrective ou évolutive. S'assurer de la cohérence des livrables avec les bonnes pratiques définies. Must Haves :Maîtrise de SQL. Connaissance de Python ou Java pour les traitements de données. Expérience avec les outils GCP : BigQuery, Dataflow, DataForm, Pub/Sub, CloudComposer. Nice to Haves :Connaissances en design et gestion des workflows avec Talend. Familiarité avec des outils de CI/CD comme Git, Jenkins, ou Terraform.