Trouvez votre prochaine offre d’emploi ou de mission freelance BigQuery

Nous recherchons un Tech Lead Data expérimenté pour rejoindre l'équipe client et piloter des projets data stratégiques. Vous aurez un rôle clé dans la conception et la mise en œuvre de solutions de data pipeline, d’analytique et de reporting, tout en accompagnant une équipe d’ingénieurs data. Vous interviendrez principalement sur des technologies telles que BigQuery , DBT , Looker , SQL et Airflow . Vous justifiez d’au moins 8 ans d’expérience en tant qu’ingénieur data ou Tech Lead, avec une expertise démontrée sur l'environnement technique. Une expérience dans le retail est un plus.

Nous recherchons un Data Engineer GCP - BigQuery, Azure Data Factory et DBT pour contribuer à des projets de transformation de données. Vous serez responsable de la conception et de la gestion des pipelines de données en utilisant Google BigQuery comme base de données principale, Azure Data Factory (ADF) pour le processus ELT , et DBT (Data Build Tool) pour orchestrer les transformations entre les bases de données BigQuery. Vous travaillerez sur des projets de captage et de transformation de données ainsi que sur la mise en place d'indicateurs et de rapports via des outils de BI tels que Power BI , SSRS ou d'autres plateformes de visualisation. Développement de pipelines de données (ELT) : Créer et maintenir des pipelines de données avec Azure Data Factory pour orchestrer l'extraction, le chargement et la transformation des données. Intégrer des flux de données provenant de multiples sources vers BigQuery pour le stockage et l’analyse. Gérer l'architecture des données, en assurant la qualité et la conformité tout au long du processus ELT. Transformation des données avec DBT : Utiliser DBT (Data Build Tool) pour transformer et modéliser les données au sein de BigQuery . Développer et maintenir des modèles de données modifiables et bien structurés pour répondre aux besoins d'analyse métier. Assurer une documentation claire des transformations et des modèles DBT pour faciliter leur réutilisation et leur maintenabilité. Gestion des données sur BigQuery : Assurer l'optimisation des performances des bases de données BigQuery en termes de stockage, de requêtes et de coûts. Implémenter les meilleures pratiques pour la gestion des données, y compris les partitions et les indexations. Mise en place de reporting et d'indicateurs : Collaborer avec les équipes métiers pour définir les KPI et concevoir des tableaux de bord personnalisés avec Power BI ou SSRS . Créer des visualisations interactives et dynamiques permettant d’analyser les données stockées dans BigQuery et issues des transformations réalisées via DBT . Automatiser les processus de reporting pour fournir des rapports en temps réel et des indicateurs fiables. Documentation et optimisation : Documenter toutes les étapes des pipelines de données, des transformations DBT et des processus de reporting pour garantir la transparence et la collaboration entre les équipes. Identifier et implémenter des solutions pour améliorer les performances des pipelines de données et des processus d'analyse. Collaboration inter-équipes : Travailler en collaboration avec les équipes data, DevOps, et les parties prenantes métier pour comprendre les besoins, résoudre les problèmes techniques et optimiser les flux de données. Participer activement à l'amélioration continue des processus et des outils.

Vous participez au quotidien à la bonne mise en oeuvre des éléments suivants : - Un déploiement régulier des applications - Des montés de version régulières des applications - Une pratique des tests dans un environnement similaire à celui de production - Une intégration continue incluant des « tests continus » ; - Une surveillance étroite de l'exploitation et de la qualité de production via des métriques factuelles - Une Analyse des problèmes de performances - Une Gestion des outils de CI/CD - Une Mise en place d'outils / de rapports pour les équipes de développement - Une Gestion et automatisation des environnements des développeurs - Une prise en compte de la sécurité dès la conception - Vous êtes en capacité de traiter le développement d'api ou de solutions en backend pour de petites applications. - Mise en place des bonnes pratiques auprès des utilisateurs - Participations ponctuelles aux guildes des leaders techniques Vous maintenez en conditions opérationnelles les environnements applicatifs et la plateforme. - Gestion des incidents - Gestion des tickets de RUN remontés par les utilisateurs Hard Skills : - Stockage des données: PostgreSQL, ElasticSearch, BigQuery, MongoDB - Orchestrateurs : Kubernetes, Helm, Docker - Administration systèmes Gnu / Linux (Debian/Ubuntu/Alpine …) - Administration réseau (réseau VPC, VPN, Firewall, Traefik, load balancing) - CI/CD : GitHub Action, Terraform - Monitoring : Prometheus, AlertManager, Grafana, GCP StackDriver, Datadog - Cloud : Google Cloud Platform - Sécurité : IAM, Gestion de droits, gestion d'accès applicatifs, Vault (appRole / policies) - Langages : Shell, Python - Frameworks : FastApi, Django - Echange de données : Kestra, Kafka Soft Skills : - Empathie - Pragmatisme - Disponibilité - Curiosité - Adaptabilité - Bonne communication Mission long terme, présence sur site (Région lilloise) exigée 3j/semaine

Dans le cadre de l'accompagnement des projets data de notre client, nous recherchons un Data Analyst expert, détenant une maitrise avancée du langage SQL dans un environnement Google Cloud Platform BigQuery , avec des compétences en analyse, préparation, nettoyage et croisement de données, ainsi que dans le calcul des KPI. La maîtrise de Power BI, notamment pour la création de dashboards visuellement attrayants et performants, est également un prérequis indispensable. Le candidat devra faire preuve d'une grande autonomie, d'une forte implication, et d'une excellente organisation.

Pour une amélioration continue du site web du client, nous sommes à la recherche d'un développeur back end elasticsearch confirmé, pour notre client final. Le candidat procèdera à l'analyse, au paramétrage et au codage des composants applicatifs, tout en s'assurant que les modifications souhaitées sont réalisées conformément aux normes et procédures en vigueur. Le candidat doit avec une grande maitrise d'elesticsearch et particulièrement sur l'indexation automatique, ainsi qu'une bonne maitrise de nestjs, typescript, bigquery, sql, et CI/CD.

Architecturer, déployer et gérer une infrastructure cloud évolutive et fiable en utilisant les services GCP tels que Compute Engine, Cloud Storage, Kubernetes Engine (GKE), BigQuery, et d'autres. Concevoir et mettre en œuvre l'infrastructure en tant que code (IaC) en utilisant des outils tels que Terraform, Cloud Deployment Manager ou Ansible pour automatiser le provisionnement et la configuration. Développer, maintenir et améliorer les pipelines CI/CD en utilisant des outils tels que Jenkins, GitLab CI, ou Cloud Build pour la livraison automatisée d'applications

Espace-Freelance, réseau de consultants indépendants, recherche pour l’un de ses clients directs : Data analyst N2 - Socle data (H/F) Vos missions : Build : Construire et maintenir les flux de données du Datalake, Analyser et concevoir des solutions en obtenant les données adéquates, en collaboration avec les Data Analysts et Data Stewards. Développer et configurer des solutions logicielles avec les outils de Google Cloud Platform (BigQuery) et des outils internes. Run : Suivre la production et assurer la maintenance corrective et évolutive des chaînes d'alimentation de données. Présence sur site : 3 jours / semaine

Vos missions seront : Mise en place d'une supervision des données arrivant dans le datalake. Création d'un monitoring complet sur les flux reçus et émis. Création d'un système d'alerte automatisé pour détecter les anomalies dans les flux de données et prendre des mesures correctives immédiates Mise en place de scoring sur des données envoyés à des prestataires externes. Création de dashboard pour monitorer l'envoi des données. Responsable DATA de plusieurs applications. BUILD et RUN sur les différentes applications.

Nous recherchons un Technical Leader afin de développer les aspects techniques des produits numériques tout en garantissant leur délivrabilité en proposant des arbitrages techniques et fonctionnels et en contrôlant la qualité des produits numériques. Ce que vous ferez : - Concevoir l'architecture logicielle du produit numérique sur votre périmètre et être responsable de son implémentation en parallèle de la qualité de développement de l'équipe - Prendre des décisions techniques et architecturales influencées par les données commerciales, le Digital Product Leader (Engineering Manager) et le Business Product Leader (Product Manager). - Garantir la mise en œuvre de bonnes pratiques assurant la qualité technique, la résilience, la sécurité et la maintenabilité, y compris la conformité avec les normes de codage et les règles de conformité - Macro-estimer les sujets sur la base des données commerciales - Diriger et/ou déléguer l'encadrement technique pour résoudre les problèmes difficiles avec les propriétaires de produits et l'équipe - Assurer la livraison du produit dans les délais et la pertinence des fonctionnalités développées - Rédiger et maintenir un bon niveau de documentation technique, permettant l'internalisation à partir et en dehors du domaine ; - Améliorer l'architecture globale de la solution de place de marché avec d'autres responsables techniques, architectes d'entreprise et architectes de données - Co-construire la feuille de route technique du produit avec le responsable de l'ingénierie - Décomposition des User Stories en tâches techniques avec l'équipe - Développer les compétences techniques des équipes, soutenir les développeurs par le biais du mentorat et du coaching et les suivre dans leurs tâches quotidiennes ; proposer des solutions pour résoudre les obstacles à l'amélioration continue de la qualité de l'information et de la communication.

CDI/Freelance/Portage 💼 – 2 jours de télétravail/semaine 🏠 – 📍 Lille – 5 ans d'expérience minimum Vous êtes passionné(e) par l’intelligence artificielle et souhaitez piloter des projets d’envergure internationale ? Lisez la suite... Vos missions : - Gérer et prioriser une roadmap centrée sur des solutions IA innovantes. - Identifier et développer des opportunités d'usage de l'IA à l'échelle internationale. -Travailler avec des équipes pluridisciplinaires (Data Engineers, Data Scientists, ML Ops) pour assurer le bon déroulement des projets. -📈 Déployer les solutions IA dans nos différentes BU et accompagner leur adoption par les utilisateurs.

En tant que développeur Search Engine, vos missions incluent : Optimiser les résultats de recherche du site en améliorant leur pertinence grâce au Machine Learning. Participer activement à toutes les phases du cycle agile : conception, développement, test, déploiement et maintenance des nouvelles fonctionnalités. Appliquer et remettre en question les recommandations d’architecture, de sécurité et de performance pour garantir la qualité et la robustesse des développements. Collaborer avec l’équipe pour élaborer le contenu des prochaines versions. Trouver des solutions techniques en équipe pour atteindre les objectifs fixés. Documenter les aspects techniques et partager les connaissances avec les autres développeurs. Contribuer à l’amélioration des processus de livraison des produits en utilisant les outils DevOps et les méthodes agiles.

Espace-Freelance, réseau de consultants indépendants, recherche pour l’un de ses clients directs : Product Owner (H/F) - Lille Mission à pourvoir en région Lilloise Compétences obligatoires : - BiQuery - Kafka Vous savez communiquer en anglais dans un contexte professionnel Votre mission : - Vous définissez et suivez les KPIs - Vous réalisez et faites évoluer les Dashboard - Vous communiquez avec toutes les parties prenantes du projet - Vous définissez la roadmap Produit - Vous réalisez des User Stories - Vous contribuez aux rituels de l’équipe Vous avez de l’expérience sur un poste similaire REFERENCE : EFN/POLMA/104

Dans le cadre du changement de prestataire pour la récupération des données concurrentielles, notre client recherche un Chef de Projet capable de piloter cette prestation. Vous serez en charge de centraliser les besoins en données, de suivre la performance du prestataire via les KPIs définis et d'assurer une communication fluide avec les différentes Business Units (BUs) et clients internes. Centralisation des besoins : Recueillir les besoins des différentes équipes internes concernant de nouvelles données et enseignes à surveiller. Travailler en collaboration avec les Business Units pour prioriser les demandes et les intégrer dans le service. Pilotage de la prestation : Assurer le suivi des indicateurs de performance (KPIs) et des SLA pour la récupération de données concurrentielles. Piloter la relation avec le nouveau prestataire et s’assurer de la qualité de la prestation. Gérer les escalades et les ajustements nécessaires pour respecter les niveaux de service attendus. Suivi et évolution des dashboards : Faire évoluer les tableaux de bord existants pour assurer un suivi optimal des performances et de la qualité des données récupérées. Proposer des améliorations continues des outils de reporting afin de mieux répondre aux besoins des utilisateurs internes. Communication avec les clients internes : Assurer une communication régulière avec les différents clients internes sur les performances du service, les incidents, et les améliorations en cours. Organiser des points de suivi avec les équipes internes pour garantir la satisfaction des différents BUs et clients internes.

SA MISSION : Il est garant de l'accès qualitatif aux sources de données. Il s'assure de la maîtrise de la donnée et est garant de la qualité de son utilisation (référencement, normalisation, et qualification) afin d'en faciliter l'exploitation par les équipes (Data Analysts et Data Scientists). Il contribue également à la définition de la politique de la donnée et à la structuration de son cycle de vie dans le respect des réglementations en vigueur, en collaboration avec le Chief Data Officer. Son périmètre d'intervention est axé sur les systèmes applicatifs autour de la gestion de la donnée et du traitement, et sur les plateformes Big Data, IoT, Il assure la supervision et l'intégration des données de diverse nature qui proviennent de ces sources multiples et vérifie la qualité des données qui entrent dans le Data Lake (il recette de la donnée, supprime les doublons, ). SON ACTIVITE : QUALIFICATION ET GESTION DES DONNÉES : - Capte les données (structurées et non structurées) produites dans les différentes applications ou à l'extérieur de l'entité - Intègre les éléments - Structure la donnée (sémantique, etc.) - Cartographie les éléments à disposition - Nettoie la donnée (élimination des doublons, ) - Valide la donnée - Éventuellement, il crée le référentiel de données SES LIVRABLES : - Data Lake approprié et partagé et son dimensionnement - Cartographie des données - Les éléments permettant de garantir la qualité de la donnée

Le Product Owner est chargé de comprendre les besoins exprimés par le Business Product Leader et les équipes métiers situées dans divers pays. Il doit être en mesure de définir les User Stories (US) avec les règles métiers associées, en collaboration avec les utilisateurs, afin de garantir une bonne traduction des besoins en spécifications fonctionnelles. Le Product Owner devra animer une équipe pluridisciplinaire composée de Data Engineers, Data Scientists et ML Ops, tout en assurant la coordination et l’avancement des projets dans un cadre agile. Il est responsable de la gestion et de la priorisation de la backlog, notamment dans un mode itératif, et doit savoir équilibrer entre les besoins opérationnels (run) et les améliorations techniques lorsque cela s’avère nécessaire. Ce rôle comprend aussi l'animation d’un club d’utilisateurs réunissant les métiers des différents pays. Par conséquent, une maîtrise professionnelle de l’anglais est indispensable. Traduire les besoins métiers en User Stories et les documenter avec les règles métiers associées. Animer une équipe pluridisciplinaire pour garantir l'avancement des projets et la cohésion technique. Prioriser efficacement les backlogs en équilibrant les besoins de run et les améliorations techniques. Animer des sessions avec les utilisateurs finaux et les représentants métiers des différents pays.

➢ CONTEXTE * Au sein du domaine Data BI nous recherchons un Data Engineer qui aura la capacité de gérer à la fois les aspects MCO/TMA mais également la partie projets pour les différentes directions du groupe en collaboration avec le reste de l’équipe. À la suite d’une passation avec notre centre de service, il devra également être en mesure d’innover et d’améliorer les processus existants pour perfectionner l’efficience de l’équipe au quotidien dans ses différentes tâches. ➢ DESCRIPTION DE LA MISSION • Participe à l’analyse du besoin avec la supervision du PPO ou Manager et à la conception du modèle de données permettant de répondre aux enjeux. • Utilise l’analyse des données pour fournir des éléments significatifs et éclairer la conception/mise en œuvre des projets • Conçois, développe et maintien les pipelines de données pour l’acquisition, la transformation, le stockage et la mise à disposition des données. • Optimise les performances des développements pour assurer une disponibilité et une fiabilité maximale • Identifie et résout les goulots d’étranglement et les problèmes de performances dans les flux de données • Met en place des processus et des contrôles pour garantir la qualité des données • Conçoit et met en œuvre des systèmes d’alerte, de monitoring et de reprise automatique efficaces. • Réalise la recette technique et anime la recette fonctionnelle avec les utilisateurs • Rédaction des documents associés au projet (Spécification Fonctionnelles, Spécifications Techniques, Cahier de recette Technique, Document d’exploitation) • Être force de proposition sur l’amélioration de notre stack Data • Faire le reporting d’avancement des travaux • Support au déploiement • Assure la maintenance corrective ou évolutive • S’assure de la cohérence des livrables avec les règles et bonnes pratiques définies au sein de l’équipe