Trouvez votre prochaine offre d’emploi ou de mission freelance Databricks

Architecte Data Azure et Snowflake . - Il maîtrise le panel des exigences fonctionnelles et non fonctionnelles à collecter afin d'assurer l'efficience opérationnelle et la pérennité de la data platform. - Expert et maîtrise tous les outils et services de l’écosystème Azure et a des facilités pour étendre votre champ de compétences. - proactif/ve sur la veille technique et la capitalisation et veille à garder toujours un temps d'avance sur l'état de l'art du secteur afin de pouvoir guider ses clients. - En tant qu'architecte expérimenté(e) il peut intervenir sur des missions opérationnelles pour concevoir la solution cible ou en phase de cadrage amont pour guider les choix et construire les roadmaps. - pédagogue et sait communiquer et vulgariser des réflexions complexes pour les rendre accessibles à tous.

Contexte de la Mission : Nous sommes à la recherche d'un Data Architect qui assumera la responsabilité complète de l'architecture des données. Cette personne devra avoir une solide compréhension des services disponibles dans Azure Analytics et travaillera en étroite collaboration avec plusieurs équipes . Elle jouera un rôle clé dans la conception de l'architecture des données et fournira un soutien tout au long du cycle de vie de la gestion des données. Tâches à Réaliser : • Assurer le leadership technique, participer au développement et représenter les ressources internes et externes de la plateforme. • Être un membre actif de l'équipe des architectes pour superviser le processus de gestion des données et fournir des conseils aux équipes de développement. • Être responsable de la conception et de la documentation de la solution dans votre domaine.

Je recherche un Architecte de données pour l’un de nos clients dans le secteur de l’industrie. Voici les détails de la mission : Démarrage : Dès que possible Durée de la mission : Long terme Temps plein 3 jours sur site (Est lyonnais) TJM 400€ - 500 € (ou 50/60k en portage) Anglais (C1) Courant ou natif En tant qu’Architecte de données, vous ferez partie de l’équipe stable de BI & Analytics, axée sur le marketing et la communication des camions. Si vous avez des questions, n'hesitez pas à me contacter.

🌟 Envie d’un nouveau challenge... CELAD vous attend ! 🚀 Nous poursuivons notre développement et recherchons actuellement un(e) Data Architect pour intervenir chez un de nos clients. 💻💼 Votre mission 🎯 : Vous arrivez avec votre expertise technique et vous plongez dans le développement. Vous serez là, au cœur de la guilde des architectes, assurant la bonne marche du flux de données et donnant un coup de main aux équipes de développement. C'est vous qui aurez la responsabilité de donner vie à la solution dans votre domaine, en documentant chaque étape du processus. Et puis, vous avez l'habitude de façonner, documenter et garder en bon état les modèles de données, tant logiques que physiques.

VISIAN est une société de conseil spécialisée autour de l'innovation, la conception produit et la data. Dans un marché où les enjeux de recrutement sont clés et où le nombre de freelances est en constante augmentation, Visian a créé une entité dédiée au recrutement de freelances experts du digital et d’IT. Dans le cadre de ses projets, nous recherchons un développeur MDM. L’objectif est de développer une plateforme dite « MDM » basée sur des technologies Big Data robustes et évolutives. Cette plateforme sera capable de traiter un volume important de données dans différentes entités locales B2B. Son objectif principal est de capturer diverses métriques sur l'électricité et le gaz (allocation, consommations, point de livraison….). Cette plateforme est déjà déployée en France et l'objectif est d'étendre le périmètre à d'autres pays B2B. L’équipe principale MDM a principalement 2 missions : • Construire et améliorer le cadre commun (volet fonctionnel et technique pur) • Accompagner le déploiement du MDM dans différents pays.

Contexte de la mission : Nous recherchons un Domain Data Architect prenant en charge la zone EMD BU. Cette personne aura la responsabilité de créer l'architecture cible complète pour la BU EMD alignée sur l'architecture Client et de soutenir la migration du développement vers cette cible. Nous recherchons une personne ayant une bonne compréhension globale des services disponibles dans la pile Azure Analytics. Cette personne travaillera avec plusieurs équipes de produits. Il assurera le leadership et le soutien en matière d'architecture tout au long du cycle de vie de bout en bout de la gestion des données. MISSIONS : Vous assurez un leadership technique, vous participez aux efforts de développement et vous représentez toutes les capacités internes et externes de la plateforme. Vous serez un membre actif de la guilde des architectes pour superviser le processus de gestion des données et fournir des conseils et une orientation aux équipes de développement. Vous êtes responsable de la conception, de la documentation de la solution dans votre domaine Vous êtes habitué à développer, documenter et maintenir des modèles de données logiques et physiques

Data analyst confirmé à Senior Connaissance supply chain et logistique Maitrise python et SQL Maitrise de tableau Maitrise de DBT et databricks un plus S'investir auprès des interlocuteurs métier et sur le terrain opérationnel afin de comprendre au mieux la problématique sur laquelle tu travailles. Tu imagines les solutions Data correspondantes en étant force de proposition et en respectant leurs contraintes et avec une bonne connaissance des analyses et outils existants. Identifier les données nécessaires à ton étude, tu t’assures de leur qualité et fiabilité. Tu effectues le nettoyage et la préparation préalables à l’application des méthodes statistiques et analytiques que tu auras choisi. développer et documenter les analyses (data sourcing, hypothèses et méthodes analytiques) dans une logique Lean & Agile assurer le monitoring des analyses existantes, anticipes les impacts et organiser le support. rendre disponible les résultats de tes analyses via des interfaces simples et user friendly. (maitrise de Tableau Software importante). Accompagner dans l’usage de celles-ci et dans l’application opérationnelle de vos études. Construire des dashboard efficient et user friendly sur tableau software

Package pyspark Documentation technique Compétences techniques PYTHON / PYSPARK / SPARK - Confirmé - Impératif Databricks/ datafactory/ azure devops - Confirmé - Impératif Integration GIT - Confirmé - Important Connaissances linguistiques Français Courant (Impératif) Description détaillée Dans le cadre de la mise en place du projet Data Finance nous recherchons un data engineer confirmé. - Contexte : le projet Data Finance à pour objectif de mettre a disposition des données consolidé de différente source (base de données relationnelle, SAP , base de données Iaas) dans un modèle de donnée modélisé en Etoile a des fins d'analyse financier. - Environnement technique : Azure DataFactory, Databricks, Pyspark, SQL , Azure devops, Blob Storage. - Mission du candidat : Développer des pipeline d'ingestion des données dans le datalake avec datafctory Développer des flux de transformation de données via Python/spark/ Pyspark Databricks. Mettre en place des pipeline CICD azure devops Participé au re factoring du code existant Être garant de la qualité du code et le bon respect des norme de développement Mis en place des test unitaire. Mise en place du monitoring et de la supervision de l'application datafinance . - Compétences requises : - Une bonne maitrise SQL / Pyspark / SPARK. -Avoir au moins 4/5 ans d'expérience en tant que Data engineer / utilisation de databricks. - Une connaissance environnement Cloud (Microsoft Azure), GIT, Devops - Une bonne communication et être fort de proposition. - Connaissance des bonnes pratique de développement.

Data engineer senior Travailler l'architecture du produit avec le Tech Lead Mettre en place la stack technique Apporter une expertise sur la constitution de datasets & KPIs Assurer la qualité des traitements et des données Etre capable de créer des KPIs à partir des données du Datalake Maîtriser les modèles de données et les outils de transformation Mettre en place des indicateurs de mesure de qualité sur chaque développement engagé pour assurer la bonne mise à disposition de la donnée Mission située à Lille

Automatiser et industrialiser les pipelines de transformation de données qui servent aux dashboards, modèles IA et data analyses Construire et modéliser la semantic layer de domaine métier (commerce, supply, , etc.) ; définir la stratégie de nos stacks techniques et garantir la qualité des données exposées ; Maintenir et repenser les datasets et pipelines existants pour servir une plus large variété de use cases Permettre de l'analytique intelligente en construisant des datasets robustes, fiables et pertinents ;

Description et livrables de la prestation Dans le domaine DATA de la DSI Assurances Collectives du groupe, au sein de la Squad "Entrepot et compte client", nous cherchons le/la Data Analyste de la squad. La squad a la responsabilité de l'application Compte Client (développée en externe sous Oracle PBCS), d'une application de ventilation de données (en interne techno React/Azure), l'entrepot des collectives (Datawarehouse Oracle contenant tout l'historique des données des collectives depuis 20 ans), et participe aux projets BigData gérés dans le domaine. Tous les développements sont réalisés en mode Agile ScrumBan Le/la Data Analyste devra être capable de : - Rédiger des spécifications techniques (flux & ETL) - Rédiger des User Story - Faire des études d'impacts sur les modèles de données - Maitriser le SQL avancé sur un gros volume de données - Faire le linéage de données - Effectuer du data mapping avancé - Échanger avec les équipes ETL au Portugal (en anglais) - Effectuer la recette des flux

o Data engineering : mise à disposition des données dans le datalake au format delta lake (Azure Databricks) ▪ Conception des flux data ▪ Développement des pipelines de données avec ADF et Databricks (ingestion Bronze/ Implémentation Silver) ▪ Mise en œuvre avec le superviseur des flux du monitoring de ceux-ci ▪ Intégration des tests unitaires o Analyse & BI : ▪ Analyse des besoins ▪ Conception, élaboration et déploiement des rapports et tableaux de bord sous Power BI à partir du Gold ▪ Modélisation des datamarts ▪ Analyses de données et Requêtages ▪ Maintenance évolutive et corrective o Coordination des intervenants SI o Rédaction de spécifications & Documentation o Mise en place des exigences RGPD/SSI

Les missions : Animation d'ateliers pour étudier et cadrer les besoins des clients en collaboration avec l'architecte de solutions. Conception et mise en œuvre de plateformes de données (entrepôts de données, datalake/lakehouse). Rédaction de documents d'architecture et de spécifications techniques. Mise en œuvre des stratégies d'exploitation des plateformes de données. Construction et déploiement d'architectures de données à l'aide d'outils d'infrastructure en tant que code tel que Terraform, CloudFormation, etc. Automatisation et amélioration des opérations (SRE), tout en cherchant à optimiser l'utilisation des ressources des plateformes. Participation aux phases d'avant-vente à travers des études de faisabilité, d'impact, d'architecture, de choix technologiques et d'estimations de charges. Technologies : Talend, DataBricks, Snowflake, DBT, Starburst, Tableau / Power BI / Looker, AWS, Azure et GCP