Trouvez votre prochaine offre d’emploi ou de mission freelance Data engineer à Lille
L’ingénieur DATA établit, développe et agence les outils informatiques et les fondements correspondant à l’analyse des données par les équipes de DATA Scientist. Il prépare l’architecture pour recevoir les données. En résumé, il crée de grands bassins de données pour les entreposer et les tester. Cela permet aux DATA Scientist d’effectuer leur travail dans de bonnes conditions. L’ingénieur DATA gère les systèmes de traitement des bases de données de grande envergure.
L’ingénieur DATA prend garde à offrir une solution qui garantit l’examen de gros volume de données et offre leur sécurité. Il est le premier acteur de la chaine de traitement des données et veille à ce que tout fonctionne correctement.
De nouveaux métiers spécialisé dans le DATA sont créés de nos jours. Afin de traiter ces volumes importants de données stockées dans les plateformes, l’ingénieur DATA gère les popelines de données et veille à ce qu’elles soient bien sécurisées et compréhensibles pour être étudiées par les DATA analyst puis converties par les DATA Scientist afin qu’ils y insèrent des algorithmes.
L’ingénieur DATA est un expert en mission de développement de flux de données et en langages techniques comme Javascript, Scala ou Python.
Informations sur la rémunération de la fonction
Data engineer.
Astuce
Utilisez des virgules pour rechercher plusieurs termes en même temps.
Exemple : sql, php correspond à sql OU php
Mission freelance
Data Engineer
Nous sommes à la recherche d'un(e) Data Ingénieur / Développeur Flux passionné(e) par les technologies de flux de données et le développement de solutions ETL/ESB. Rejoignez-nous pour faire partie d'une équipe dynamique et contribuer à la conception et à l'implémentation de projets data de haute qualité pour nos clients. Description de la mission : En tant que Data Ingénieur / Développeur Flux, vous serez intégré(e) à un plateau agile et vous aurez pour mission la conception et l'implémentation de solutions ETL/ESB pour nos clients. Vous travaillerez sur des projets data transverses, en étroite collaboration avec les équipes métier et business, et vous contribuerez à faire évoluer et à challenger les process de l'entreprise. Responsabilités : Concevoir et développer des programmes et applications ETL/ESB en fonction des spécifications fonctionnelles et des besoins client. Réaliser les procédures de tests techniques, d'intégration et de recette des développements. Analyser les problèmes techniques et fonctionnels et proposer des correctifs et des mises en conformité techniques. Élaborer et rédiger des documentations techniques à destination du service informatique client. Automatiser l'acquisition, la collecte et l'agrégation des données provenant de différentes sources. Gérer les bases de données de stockage et nettoyer, consolider et structurer les données à l'aide d'outils et d'algorithmes. Travailler en étroite collaboration avec les autres membres de l'équipe technique pour assurer la pertinence et la qualité des solutions développées.
Mission freelance
Data engineer
Nous sommes à la recherche d'un Data Engineer ayant au moins 4 ans d'expérience, et possédant des compétences en SSAS/AAS Tabular. La mobilité sur Lille est requise, avec une présence sur site de 3 jours par semaine. Dans le cadre de ce poste : Le candidat sera chargé de mettre en place et de maintenir la plateforme de données, en veillant à ce que les données soient accessibles aux différents départements avec le niveau de qualité requis. Il devra également garantir la sécurité et la scalabilité du système d'information, aligné sur les objectifs de l'entreprise et les exigences internes et externes. En termes de responsabilités : Il sera responsable du développement des compétences techniques et de l'autonomie de l'équipe de Data Engineers, de faciliter la collaboration, et de mettre en place et de garantir les bonnes pratiques de développement et de documentation (DevOps). Il devra également industrialiser les modèles statistiques ou de machine learning selon les besoins du Product Owner, tout en assurant le maintien de la qualité globale, de la performance et en restant à jour sur les outils technologiques liés aux données. Il sera également chargé de collecter, stocker et rendre accessible les données, de recueillir les exigences métier détaillées auprès du Product Owner, de travailler en étroite collaboration avec le Data Architect pour valider les solutions techniques conformes aux normes et processus établis, et de mettre en place l'automatisation des traitements de données. Le candidat devra réaliser des tests unitaires, d'intégration et procéder à la mise en production, en maintenant la qualité des données et en automatisant leur nettoyage conformément aux règles du Data Steward. Il sera également responsable de gérer le cycle de vie des données conformément aux règles établies, et de superviser la qualité technique, la gestion opérationnelle et la sécurité de l'accès aux données.
Mission freelance
Data engineer (H/F)
Basée à Lille, Lyon, Nantes, Grenoble et Bruxelles, Insitoo Freelances est une société du groupe Insitoo, spécialisée dans le placement et le sourcing des Freelances IT et Métier. Depuis 2007, Insitoo Freelances a su s’imposer comme une référence en matière de freelancing par son expertise dans l’IT et ses valeurs de transparence et de proximité. Actuellement, afin de répondre aux besoins de nos clients, nous recherchons un Data engineer (H/F) à Lille, Hauts-de-France, France. Les missions attendues par le Data engineer (H/F) : - Développer les compétences techniques et l'autonomie de l'équipe de Data Engineer - Faciliter la coopération - Développer et garantir les pratiques de développement et de documentation associés (DevOps) - Développer l'industrialisation de modèles statistiques ou de machine learning demandés par le Product Owner - Garantir le maintien et la qualité de fonctionnement d'ensemble ainsi que la performance - Assurer une veille technologique sur les outils data - Collecter, stocker puis exposer les données - Recueillir les besoins métiers détaillés auprès du Product Owner - Définir et valider avec le Data Architect les solutions techniques en cohérence avec les normes, standards et processus - Développer les solutions techniques de collecte / stockage / exposition de la donnée - Mettre en place l'automatisation des traitements (pipelines) - Réaliser les tests unitaires, d'intégration et procéder à la mise en production - Industrialiser et automatiser le nettoyage de la donnée selon les règles du Data Steward - Gérer le cycle de vie de la donnée conformément aux règles définies - Manager la qualité technique, la gestion du run et sécuriser l’accès aux données
Mission freelance
Data Engineer SSAS/AAS Tabular
Nous recherchons un Data Engineer SSAS/AAS Tabular pour une mission de 3 mois renouvelables sur Villeneuve d'Ascq. ▶ Finalité : Mettre en œuvre et maintenir la plateforme data, exposer les données aux métiers avec le niveau de qualité attendu. Garantir la sécurité et l'évolutivité du Système d'Information managé en cohérence avec les objectifs de l'entreprise et les contraintes externes et internes. ▶ Mission : ▪ Développer les compétences techniques et l'autonomie de l'équipe de Data Engineer • Faciliter la coopération • Développer et garantir les pratiques de développement et de documentation associés (DevOps) • Développer l'industrialisation de modèles statistiques ou de machine learning demandés par le Product Owner • Garantir le maintien et la qualité de fonctionnement d'ensemble ainsi que la performance • Assurer une veille technologique sur les outils data Collecter, stocker puis exposer les données • Recueillir les besoins métiers détaillés auprès du Product Owner • Définir et valider avec le Data Architect les solutions techniques en cohérence avec les normes, standards et processus • Développer les solutions techniques de collecte / stockage / exposition de la donnée • Mettre en place l'automatisation des traitements (pipelines) • Réaliser les tests unitaires, d'intégration et procéder à la mise en production Mettre et maintenir en qualité les données • Industrialiser et automatiser le nettoyage de la donnée selon les règles du Data Steward • Gérer le cycle de vie de la donnée conformément aux règles définies • Manager la qualité technique, la gestion du run et sécuriser l’accès aux données
Offre d'emploi
Data Engineer / Analytics engineer
Dans le cadre d'une assistance technique, pour l'un de nos clients se trouvant en métropole Lilloise, nous recherchons: Un/une: Data Engineer / Analytics engineer. Vos missions sont les suivantes: - Automatiser et industrialiser les pipelines de transformation de données qui servent aux dashboards, modèles IA et data analyses - Construire et modéliser la semantic layer de domaine métier (commerce, supply, sports, etc.) ; - Définir la stratégie de nos stacks techniques et garantir la qualité des données exposées ; - Maintenir et repenser les datasets et pipelines existants pour servir une plus large variété de use cases ; - Permettre de l'analytique intelligente en construisant des datasets robustes, fiables et pertinents ; - Contribuer activement à notre communauté d'analytics engineers et de data engineers ; Et après ? En tant que véritable partie prenante de DAVRICOURT, vous vous verrez proposer des projets techniques et à forte valeur ajoutée par nos équipes.
Mission freelance
Data Engineer confirmé
Description du projet : Nous recherchons actuellement un(e) Data Engineer Freelance pour travailler sur un projet spécifique avec l'un de nos clients basé dans la région de Lille Métropole. Le projet implique la conception, le développement et la maintenance de systèmes de gestion de données pour répondre aux besoins métier spécifiques de notre client. Le(la) consultant(e) retenu(e) sera amené(e) à travailler en étroite collaboration avec les équipes internes et externes pour assurer le succès du projet. Responsabilités : Concevoir et développer des pipelines de données pour l'ingestion, le traitement et la transformation des données. Collaborer avec les équipes métier pour comprendre les exigences en données et proposer des solutions adaptées. Optimiser les performances des systèmes de gestion de données en identifiant et en résolvant les goulots d'étranglement. Assurer la qualité, la fiabilité et la sécurité des données à toutes les étapes du processus. Mettre en place des processus de surveillance et de maintenance pour garantir la disponibilité continue des systèmes.
Offre d'emploi
Data engineer senior Pyspark AWS
Data engineer senior Travailler l'architecture du produit avec le Tech Lead Mettre en place la stack technique Apporter une expertise sur la constitution de datasets & KPIs Assurer la qualité des traitements et des données Etre capable de créer des KPIs à partir des données du Datalake Maîtriser les modèles de données et les outils de transformation Mettre en place des indicateurs de mesure de qualité sur chaque développement engagé pour assurer la bonne mise à disposition de la donnée Mission située à Lille
Mission freelance
DATA ENGINEER
Il est garant de l’accès qualitatif aux sources de données. Il s’assure de la maîtrise de la donnée et est garant de la qualité de son utilisation (référencement, normalisation, et qualification) afin d’en faciliter l’exploitation par les équipes (Data Analysts et Data Scientists). Il contribue également à la définition de la politique de la donnée et à la structuration de son cycle de vie dans le respect des réglementations en vigueur. Son périmètre d’intervention est axé sur les systèmes applicatifs autour de la gestion de la donnée et du traitement, et sur les plateformes Big Data, IoT. Il assure la supervision et l’intégration des données de diverse nature qui proviennent de ces sources multiples et vérifie la qualité des données qui entrent dans le Data Lake (il recette de la donnée, supprime les doublons, ).
Mission freelance
Data Engineer (H/F)
Espace-Freelance, réseau de consultants indépendants, recherche pour l’un de ses clients directs : un Data Engineer (H/F), OFFRE A POURVOIR DANS LA METROPOLE LILLOISE. 2 jours de télétravail MAXIMUM. Votre mission : Analyse des besoins, Collecter les données via des PIPELINE Mesurer la qualité des données Conception et Développements de Dashboards et des modèles optimisés Capter, intégrer, structurer et nettoyer les données Historiser les données et les cartographier Environnement technique : GCP & BigQuery ; Terraform & Github ; PowerBI Gen 2. Profil Expérimenté recherché.
Mission freelance
Data Engineer confirmé
La mission consiste à : - Exposer les données utiles à l’entreprise pour les analyser et les utiliser afin d’améliorer l’expérience utilisateur et la productivité - Transformer des données issues du DataLake afin de les normaliser - Modéliser la sphère de données - Développer ls flux - Exposer des données brutes et/ou agrégées au bon niveau de granularité aux différents métiers de l’entreprise - Travailler en lien avec des Data Scientists sur les données qu’il aura exposées - Mettre en place des rapports de Dataviz - Mission basée en métropole lilloise avec présence sur site 3j/semaine obligatoire Compétences demandées : - Formation supérieure en école d’ingénieur, école d’informatique ou Master spécialisé dans la Data Science - Première expérience en Data Engineering indispensable - GCP, BigQuery, SQL, Python, Stambia, Shell, Data Studio, Power BI, Qlikview,... - Excellents savoir-être : rigueur, esprit analytique et de synthèse, communication... - Méthode Agile - Anglais
Offre d'emploi
Data Engineer F/H/X
Nous recherchons un ingénieur de données pour rejoindre notre équipe chez Amaris Consulting pour rejoindre équipe à Lille. Ce poste est destiné aux candidats ayant 5 ans d'expérience dans le domaine. Il s'agit d'un contrat à durée indéterminée (CDI) basé en France. 🔥 Vos responsabilités : Concevoir, construire et déployer des solutions de gestion de données efficaces. Fournir une expertise technique sur la collecte, le stockage, le traitement et l'analyse de grandes quantités de données. Développer des systèmes d'extraction, transformation et chargement (ETL) qui convertissent les données en formats utilisables par les analystes. Mettre en place des structures pour assurer la précision et l'intégrité des sources de données entrantes. Collaborer avec les équipes techniques et commerciales pour optimiser les solutions data-centric. Assurer la maintenance continue et l'amélioration des performances du système existant. Gérer la sécurité des informations sensibles conformément aux politiques internes ainsi qu’aux réglementations externes telles que RGPD Cette opportunité vous permettra non seulement d'évoluer professionnellement mais aussi personnellement au sein d'une entreprise innovante telle qu'Amaris Consulting.
Mission freelance
Data engineer (H/F)
Basée à Lille, Lyon, Nantes, Grenoble et Bruxelles, Insitoo Freelances est une société du groupe Insitoo, spécialisée dans le placement et le sourcing des Freelances IT et Métier. Depuis 2007, Insitoo Freelances a su s’imposer comme une référence en matière de freelancing par son expertise dans l’IT et ses valeurs de transparence et de proximité. Actuellement, afin de répondre aux besoins de nos clients, nous recherchons un Data engineer (H/F) à Lille, Hauts-de-France, France. Contexte : Nous recherchons un consultant data pour la création et l'amélioration continue. Les missions attendues par le Data engineer (H/F) : Le consultant Data aura une dominance Data Engineer mais des compétences de Data Analyst sont également attendues - Collecter les données via des PIPELINE - Mesurer la qualité des données - Historiser les données - Créer des modèles optimisés - Créer des dashboards pour répondre aux besoins métiers Environnement technique sur lesquels une expérience significative est attendue et non une première formation - GCP & BigQuery - Terraform & Github - PowerBI Gen 2 - Looker est un plus - Anglais Courant (lu/écrit/parlé)
Mission freelance
Data engineer (H/F)
En tant que membre de l'équipe DATA Transverse, vous participez aux rituels agiles (Daily, Rétro, Préparation de sprints...) Vous êtes force de proposition pour enrichir les templates de l'équipe, améliorer l'industrialisation de nos solutions et le déroulement de nos rituels. Vous êtes autonome sur vos sujets, tout en travaillant en collaboration avec les autres Data Engineers de l'équipe, ainsi qu'avec les Data Analysts / Data Scientists. Vous challengez les solutions proposées, dans un objectif d'amélioration continue.
Mission freelance
Data migration
Dans le cadre des déploiements SAP aux US et Mexique nous devons renforcer l’équipe Customer Master Data pour aider le BDO -Business Data Owner – dans la collecte, la préparation, et le chargement des data Customer. Liste non exhaustive des activités : - Collecte des data à transférer dans SAP - S’assurer que les data respecterons les standards définis - Préparer les outils et modus opératoires pour effectuer les chargements - Charger les données - Participer à la résolution des anomalies de chargement
Mission freelance
Développeur Flux ODI/Stambia (H/F)
Basée à Lille, Lyon, Nantes, Grenoble et Bruxelles, Insitoo Freelances est une société du groupe Insitoo, spécialisée dans le placement et le sourcing des Freelances IT et Métier. Depuis 2007, Insitoo Freelances a su s’imposer comme une référence en matière de freelancing par son expertise dans l’IT et ses valeurs de transparence et de proximité. Actuellement, afin de répondre aux besoins de nos clients, nous recherchons un Développeur Flux ODI/Stambia (H/F) à Lille, Hauts-de-France, France. Contexte : - Migrer les flux ODI vers Stambia/Semarchy xDI - De concevoir, développer et maintenir les flux de données Il travaillera en étroite collaboration avec les équipes fonctionnelles pour comprendre les besoins de l'entreprise et garantir l’intégration et l’échange des données de manière efficace et fiable. Les missions attendues par le Développeur Flux ODI/Stambia (H/F) : Analyse des besoins : Comprendre les besoins en matière d'intégration de données en collaborant avec les parties prenantes de l'entreprise. Conception : Concevoir des flux de données en utilisant la plateforme Stambia (v19, v20) et Semarchy xDI pour répondre aux exigences métier. Développement : Développer et configurer les flux Stambia en suivant les meilleures pratiques (versionning, clean code etc..) Tests : Capacité à tester ses développements flux (performance, cohérence...) pour garantir la qualité et la fiabilité. Documentation : Documenter les flux. Faire des spécifications techniques. Maintenance: Assurer la maintenance continue des flux de données et les mises à jour en cas de besoin. Veille technologique : Rester à jour sur les dernières avancées dans le domaine de l'intégration de données. Compétences Requises : ● Compréhension des concepts d'intégration de données et de l'ETL. ● Très bonne connaissance de l’outil Stambia/Semarchy xDI ● Excellente connaissance du SQL et de la manipulation XML. ● Capacité à travailler de manière autonome (prendre en charge un sujet de la phase de conception à la phase de mise en production). ● Expérience passée sur l’outil ODI. ● Connaissance du langage JYTHON / PYTHON (capacité à lire et à comprendre un code existant). ● Connaissance des API REST. ● Capacité à travailler en équipe et à communiquer efficacement (travail en agilité - KANBAN).
Mission freelance
Développeur flux ODI/ Stambia (H/F)
Le développeur Flux Stambia sera chargé de: - Migrer les flux ODI vers Stambia/Semarchy xDI - De concevoir, développer et maintenir les flux de données Il travaillera en étroite collaboration avec les équipes fonctionnelles pour comprendre les besoins de l'entreprise et garantir l’intégration et l’échange des données de manière efficace et fiable. Responsabilités Principales : 1. Analyse des besoins : Comprendre les besoins en matière d'intégration de données en collaborant avec les parties prenantes de l'entreprise. 2. Conception : Concevoir des flux de données en utilisant la plateforme Stambia (v19, v20) et Semarchy xDI pour répondre aux exigences métier. 3. Développement : Développer et configurer les flux Stambia en suivant les meilleures pratiques (versionning, clean code etc..) 4. Tests : Capacité à tester ses développements flux (performance, cohérence…) pour garantir la qualité et la fiabilité. 5. Documentation : Documenter les flux. Faire des spécifications techniques. 6. Maintenance: Assurer la maintenance continue des flux de données et les mises à jour en cas de besoin. 7. Veille technologique : Rester à jour sur les dernières avancées dans le domaine de l'intégration de données.
Déposez votre CV
-
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
-
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
-
100% gratuit
Aucune commission prélevée sur votre mission freelance.
Offres par villes