Trouvez votre prochaine mission ou futur job IT.

Cette mission implique la gestion à la fois des angles transactionnels et décisionnels du système. L'objectif ultime est le découplage et la digitalisation de l'architecture et des processus métiers de l'entreprise, dans une démarche de CI/CD (Intégration Continue / Livraison Continue). Responsabilités :- Concevoir, développer, et déployer le middleware en utilisant des technologies telles que Spark, Python, Kafka, Kubernetes, etc.- Assurer l'intégration et la compatibilité du middleware avec l'environnement Cloud de l'entreprise.- Collaborer avec les équipes techniques et métier pour comprendre les besoins et les exigences.- Assurer la supervision et la résolution des problèmes liés à l'architecture.- Mentorat des membres de l'équipe junior pour les aider à monter en compétences sur les technologies et les concepts utilisés.

Responsabilités : Concevoir, développer et maintenir des pipelines de données robustes et évolutifs pour l'ingestion, le traitement et la transformation des données. Travailler en étroite collaboration avec les équipes métier pour comprendre leurs besoins en matière de données et fournir des solutions techniques efficaces. Optimiser les performances et la qualité des données tout au long du cycle de vie du projet. Participer à la conception et à l'implémentation de l'architecture des données, en assurant la scalabilité, la sécurité et la fiabilité. Effectuer une veille technologique constante pour rester à jour avec les meilleures pratiques et les outils émergents dans le domaine du traitement des données.

Espace-Freelance, réseau de consultants indépendants, recherche pour l’un de ses clients directs : un Data Engineer (H/F), OFFRE A POURVOIR DANS LA METROPOLE LILLOISE. 2 jours de télétravail MAXIMUM. Votre mission : Analyse des besoins, Collecter les données via des PIPELINE Mesurer la qualité des données Conception et Développements de Dashboards et des modèles optimisés Capter, intégrer, structurer et nettoyer les données Historiser les données et les cartographier Environnement technique : GCP & BigQuery ; Terraform & Github ; PowerBI Gen 2. Profil Expérimenté recherché.

Un peu de contexte : Choisis ton projet, bâtis la carrière que tu souhaites, deviens un AddixWarrior ! Nous recherchons un Data Engineer pour rejoindre notre équipe. Vous serez amené à : - Transformer les données brutes pour l'analyse (pipelines ETL). - Construire et gérer l'infrastructure Big Data. - Collaborer avec les Data Scientists et les analystes. - Nécessite une expertise en Big Data (SQL, Python) et des compétences en résolution de problèmes

Notre client, société en pleine croissance, spécialisé dans le domaine de la Big Data, recherche des Consultants Data Engineer ! Participez à cette aventure et rejoignez une formidable équipe. Vos missions principales seront diversifiées, comprenant notamment : - Participation aux processus d'avant-vente : Vous contribuerez à l'élaboration des propositions techniques, mettant en avant votre expertise pour répondre aux besoins des clients. - Qualification technique des prestataires : Vous participerez activement à l'évaluation et à la sélection des prestataires, garantissant un partenariat de qualité. - Direction et coordination des projets : Vous dirigerez et coordonnerez la conception et la mise en oeuvre des projets, assurant leur réussite technique. - Documentation technique : Vous élaborerez, au besoin, des dossiers d'architecture, d'installation et d'exploitation, assurant une traçabilité et une compréhension optimale des solutions mises en place. - Participation active aux développements : Vous apporterez votre expertise en contribuant directement aux développements dans le cadre des projets. De manière plus étendue, vous aurez l'opportunité de : - Enrichir les bonnes pratiques : Vous contribuerez à l'évolution et à l'amélioration des bonnes pratiques d'architecture et de développement dans le domaine du Big Data. - Veille technologique : Vous réaliserez une veille constante sur les avancées technologiques du secteur, assurant ainsi la pertinence des solutions proposées. - Formation technique : Vous élaborerez des supports de formation technique pour nos clients et/ou nos consultants juniors, partageant ainsi votre savoir-faire. - Animation du pôle technique : Vous participerez activement à l'animation du pôle technique favorisant un environnement collaboratif et innovant.

En tant que Data Engineer, vous travaillerez en direct avec le Team Lead, les business analystes et le PO. Vous aurez à cœur de comprendre le business model. Les projets à adresser visent le développement et maintenance de modules de gestion des données de consommation (intégration, transformation et exposition), de contrats, et leur représentation à travers différentes interfaces. Vous interviendrez aussi bien sur de l'analyse de besoin, design, développement, support, maintenance corrective et évolutive. Vous travaillerez dans une équipe auto-organisée en mode agile avec un Product Owner et 3 BA (Business analystes). Les activités de cette équipe couvrent l'analyse, le développement, les tests, le déploiement et le support. Vos activités principales seront : · La montée en compétence sur les process, produits et applications existantes · La compréhension du business et la réalisation de développements en pair avec un responsable fonctionnel · L’analyse et spécifications des besoins et algorithmes · Implémenter les corrections et évolutions en couvrant tous les aspect conception, codage, sécurité, gestion des erreurs, évolutivité, scalabilité, revues de code, testing, intégration continue, ...- · Fournir des services aux utilisateurs avec le plus haut niveau de satisfaction. · Fournir des estimations de charge et délais · Soutenir l'amélioration continue des services. Identifier les goulots d'étranglement et les bugs et définir des solutions à ces problèmes · Rédiger et mettre à jour les documentations · Proposer des solutions innovantes répondant aux problématiques fonctionnelles et techniques. · Travailler en étroite collaboration avec les BA, les utilisateurs, architectes et autres équipes de développement. · Fournir une communication efficace et opportune aux différentes équipes concernées

Définir la stratégie d'ingénierie technique des données. Collaborer avec les métiers pour comprendre leurs besoins en données. Élaborer une stratégie d'ingénierie technique des données alignée sur nos objectifs. Identifier les technologies et les outils nécessaires pour atteindre les objectifs fixés par la direction. Gérer le Dataflow Participer à la conception d'architectures de données robustes et évolutives. Superviser la mise en œuvre de pipelines de données, de l'extraction à la transformation et au chargement (ETL). Garantir la qualité et la sécurité des solutions mises en place. Assurer l'intégration et l'industrialisation des sources de données pour réduire le time to market des nouvelles sources. Optimiser les performances et la scalabilité. Mettre en place des stratégies d'optimisation des performances des infrastructures de données. Optimiser la maintenance, la documentation et l'efficacité de la chaîne d'outillage et de mise en qualité des données. Documenter et remettre en question les choix d'architecture technique, notamment en ce qui concerne la performance. Garantir l'observabilité et la disponibilité du dataflow de bout en bout (Cloud Hybride). Assurer le développement MLOps dans le cadre du développement de solutions de Machine Learning. Exercer un véritable rôle de Leader technique. Encadrer notre équipe de Data Engineer/Data Miner. Planifier et optimiser la production des missions pour maintenir une performance constante. Former et assurer la montée en compétences de l'équipe pour soutenir l'innovation Data. Recruter de nouveaux collaborateurs et mener les entretiens managériaux de votre équipe.

Un peu de contexte : Choisis ton projet, bâtis la carrière que tu souhaites, deviens un AddixWarrior ! Nous recherchons un Data Engineer pour rejoindre notre équipe. Vous serez amené à : - Transformer les données brutes pour l'analyse (pipelines ETL). - Construire et gérer l'infrastructure Big Data. - Collaborer avec les Data Scientists et les analystes. - Nécessite une expertise en Big Data (SQL, Python) et des compétences en résolution de problèmes

Basée à Lille, Lyon, Nantes, Grenoble et Bruxelles, Insitoo Freelances est une société du groupe Insitoo, spécialisée dans le placement et le sourcing des Freelances IT et Métier. Depuis 2007, Insitoo Freelances a su s’imposer comme une référence en matière de freelancing par son expertise dans l’IT et ses valeurs de transparence et de proximité. Actuellement, afin de répondre aux besoins de nos clients, nous recherchons un Data engineer (H/F) à Lille, Hauts-de-France, France. Contexte : Nous recherchons un consultant data pour la création et l'amélioration continue. Les missions attendues par le Data engineer (H/F) : Le consultant Data aura une dominance Data Engineer mais des compétences de Data Analyst sont également attendues - Collecter les données via des PIPELINE - Mesurer la qualité des données - Historiser les données - Créer des modèles optimisés - Créer des dashboards pour répondre aux besoins métiers Environnement technique sur lesquels une expérience significative est attendue et non une première formation - GCP & BigQuery - Terraform & Github - PowerBI Gen 2 - Looker est un plus - Anglais Courant (lu/écrit/parlé)

En tant que Data Engineer, vous travaillerez en direct avec le Team Lead, les business analystes et le PO. Vous aurez à cœur de comprendre le business model. Les projets à adresser visent le développement et maintenance de modules de gestion des données de consommation (intégration, transformation et exposition), de contrats, et leur représentation à travers différentes interfaces. Vous interviendrez aussi bien sur de l'analyse de besoin, design, développement, support, maintenance corrective et évolutive. Vous travaillerez dans une équipe auto-organisée en mode agile avec un Product Owner et 3 BA (Business analystes). Les activités de cette équipe couvrent l'analyse, le développement, les tests, le déploiement et le support. Vos activités principales seront : · La montée en compétence sur les process, produits et applications existantes · La compréhension du business et la réalisation de développements en pair avec un responsable fonctionnel · L’analyse et spécifications des besoins et algorithmes · Implémenter les corrections et évolutions en couvrant tous les aspect conception, codage, sécurité, gestion des erreurs, évolutivité, scalabilité, revues de code, testing, intégration continue, ...- · Fournir des services aux utilisateurs avec le plus haut niveau de satisfaction. · Fournir des estimations de charge et délais · Soutenir l'amélioration continue des services. Identifier les goulots d'étranglement et les bugs et définir des solutions à ces problèmes · Rédiger et mettre à jour les documentations · Proposer des solutions innovantes répondant aux problématiques fonctionnelles et techniques. · Travailler en étroite collaboration avec les BA, les utilisateurs, architectes et autres équipes de développement. · Fournir une communication efficace et opportune aux différentes équipes concernées

Infrastructure de données: Cartographie et documente les sources de données. Contribue à assurer la maintenance du produit déployé en production et des infrastructures. Conçoit les solutions permettant le traitement de volumes importants de flux de données et ceci en toute sécurité Structure les bases de données (sémantique, format, etc.). Contribue à la gestion des référentiels de données Intégration des données: Capte et stocke, en toute sécurité, les données (structurées ou non) venant de l’extérieur de l’entreprise. Assure la supervision et l’intégration des données de diverses natures qui proviennent de sources multiples. Vérifie la qualité des données qui entrent dans le produit et s’assure de leur sécurité. Nettoie la donnée (élimination des doublons ) et la valide pour une utilisation en aval en coordination avec les Data Analysts et Data Scientists opérant sur le produit. Automatisation des Chaînes de Traitement de données / Déploiement d’Algorithme : Met en œuvre l’automatisation de chaîne de traitement de données et de déploiement d’Algorithme ML

Définir la stratégie d'ingénierie technique des données. Collaborer avec les métiers pour comprendre leurs besoins en données. Élaborer une stratégie d'ingénierie technique des données alignée sur nos objectifs. Identifier les technologies et les outils nécessaires pour atteindre les objectifs fixés par la direction. Gérer le Dataflow Participer à la conception d'architectures de données robustes et évolutives. Superviser la mise en œuvre de pipelines de données, de l'extraction à la transformation et au chargement (ETL). Garantir la qualité et la sécurité des solutions mises en place. Assurer l'intégration et l'industrialisation des sources de données pour réduire le time to market des nouvelles sources. Optimiser les performances et la scalabilité. Mettre en place des stratégies d'optimisation des performances des infrastructures de données. Optimiser la maintenance, la documentation et l'efficacité de la chaîne d'outillage et de mise en qualité des données. Documenter et remettre en question les choix d'architecture technique, notamment en ce qui concerne la performance. Garantir l'observabilité et la disponibilité du dataflow de bout en bout (Cloud Hybride). Assurer le développement MLOps dans le cadre du développement de solutions de Machine Learning. Exercer un véritable rôle de Leader technique. Encadrer notre équipe de Data Engineer/Data Miner. Planifier et optimiser la production des missions pour maintenir une performance constante. Former et assurer la montée en compétences de l'équipe pour soutenir l'innovation Data. Recruter de nouveaux collaborateurs et mener les entretiens managériaux de votre équipe.

Un peu de contexte : Choisis ton projet, bâtis la carrière que tu souhaites, deviens un AddixWarrior ! Nous recherchons un Data Engineer spécialisé en SnowFlake pour rejoindre notre équipe. Vous serez amené à : - Transformer les données brutes pour l'analyse (pipelines ETL). - Construire et gérer l'infrastructure Big Data. - Collaborer avec les Data Scientists et les analystes. - Nécessite une expertise en Big Data (SQL, Python) et des compétences en résolution de problèmes

Contexte de la mission : Viveris apporte son expertise à ses clients pour la gestion et l'exploitation des serveurs du périmètre bureau technique, dans le but de maintenir les infrastructures opérationnelles à un niveau optimal en termes de qualité, de productivité et de sécurité. Dans ce cadre, nous recherchons un Data Engineer. Sa principale mission consistera à assurer le bon fonctionnement des systèmes de production bancaire, en garantissant leurs disponibilités, leurs performances et leurs sécurités. Intégré au sein du département Infrastructures, vous serez chargé de diriger et de coordonner les projets liés à l'infrastructure technique, en veillant à leur succès dans un environnement dynamique et en constante évolution. Responsabilités : - Concevoir, développer et mettre en oeuvre des pipelines de données robustes, fiables et évolutifs pour l'extraction, la transformation et le chargement (ETL) des données provenant de différentes sources ; - Collaborer avec les équipes métier pour comprendre leurs besoins et concevoir des solutions de données innovantes et efficaces ; - Concevoir et mettre en oeuvre des modèles de données et des architectures de données optimisées pour la performance et l'évolutivité ; - Assurer la qualité et l'intégrité des données tout au long du processus de traitement, en mettant en place des contrôles de qualité et des mécanismes de surveillance.

Missions : - concevoir, développer, faire évoluer des systèmes de traitement et d’exposition de données robustes et scalables pour industrialiser nos solutions qui comprennent des algorithmes de machine learning, et de recherche opérationnelle - être au choix des bons outils et schémas architecturaux afin d’améliorer la performance des systèmes et de faciliter leur suivi et maintenance, dans une démarche cloud-first - contribuer de manière itérative aux projets, conduire des revues de code Vous pourrez également participer aux échanges réguliers de notre communauté d’une quarantaine d'ingénieurs (data scientists, engineers, devops) : présentations, partage de retours de conférences, débats sur les problématiques ML, de développement logiciel, ...

Lieu : ANGERS (49) , TJM : 500-550€ / Jour, Rythme : 2j sur site / semaine pendant le 1er mois, Nous recherchons pour notre client, éditeur de logiciels spécialisés, un DATA ENGINEER - Azure H/F dans le cadre d’une mission Freelance de 6 mois renouvelable plusieurs fois. VOS MISSIONS : Au sein d’une équipe informatique d’une dizaine de personnes et rattaché au CTO, vous intervenez dans une cadre d’un projet de refonte complète de la plateforme du client. Vos missions sont les suivantes : - Développement et maintenance de pipelines de données sur Azure. - Mise en place d'architectures de données efficaces. - Transformation de données en temps réel - Validation des données selon les règles métier et modélisation des structures. - Gestion de gros volumes de données clients. Environnement technique : Écosystème Azure (Azure Data Factory, SQL, Azure Data Lake Store, Spark, Hive, Airflow, Python, Scala) VOUS : De formation au minimum Bac+4/5 en Informatique, vous justifiez d’au moins 3 années d’expérience en Data Engineering autour de l’écosystème Azure. (impératif). Attention, vous serez LE référent sur ces sujets, votre capacité à travailler être autonome et à trouver l’équilibre entre qualité et efficacité tout en proposant des solutions fiables et durables est donc également impérative. Vous êtes intéressé par le fait de répondre à des problématiques techniques notamment, de qualité, de performance et de sécurité. PROCESS : Après une visio avec un membre de notre équipe, vous rencontrez : - Le CTO et le Responsable Infrastructure en visio - Décision sous quelques jours Envoyez-nous votre CV et si votre profil correspond vous serez contacté par un membre de l’équipe dans les 24h. Au plaisir d’évoquer votre projet, Squaar