Trouvez votre prochaine mission ou futur job IT.

211 résultats
Freelance
CDI

Offre d'emploiTech Lead Data Engineer Kafka & Palantir Foundry

OBJECTWARE
Publiée le
Apache Kafka
Palantir Foundry

3 ans
40k-84k €
400-630 €
Île-de-France, France
Dans le cadre d'un projet Data stratégique, nous recherchons un Tech Lead Data Engineer pour accompagner la conception, le développement et l'industrialisation de solutions Data dans un environnement technique exigeant. 🎯 Vos missions Concevoir et faire évoluer des architectures Data robustes et scalables Piloter techniquement les développements et accompagner les Data Engineers Concevoir et industrialiser des pipelines de données Intervenir sur des architectures Data temps réel / streaming avec Kafka Développer et maintenir des solutions sur Palantir Foundry Garantir la qualité, la performance et la fiabilité des traitements Data Participer aux choix d'architecture et aux bonnes pratiques de développement Assurer la revue de code et accompagner la montée en compétences de l'équipe Collaborer avec les équipes Data, Architecture, DevOps et métiers 🛠️ Environnement technique Indispensables : Kafka Palantir Foundry Solide expertise en Data Engineering Conception de pipelines Data Architecture Data / traitement distribué Python et/ou SQL Expérience en environnement de production Atouts : Kafka Streams / Confluent Spark / PySpark APIs / microservices CI/CD, Git, Docker, Kubernetes Cloud Expérience en lead technique ou en accompagnement d'équipe 👤 Profil recherché De formation supérieure en informatique ou Data, vous disposez d'au moins 7 ans d'expérience en Data Engineering, dont une expérience significative en lead technique. Vous êtes à l'aise dans des environnements complexes et avez une forte capacité à challenger les choix techniques, concevoir des solutions robustes et accompagner les équipes dans leur mise en œuvre. Une expérience concrète sur Palantir Foundry et Kafka est indispensable.
Voir cette offre
Freelance

Mission freelance[MDO] Ingénieur DATA / DataOps Scientifique- Expert - 2082

ISUPPLIER
Publiée le

17 mois
Paris, France
Contexte : Le client recherche un Ingénieur de Recherche spécialisé en DataOps comportemental, capable de faire le lien entre les équipes scientifiques et techniques. Votre rôle sera de transformer les besoins des chercheurs en solutions techniques concrètes : pipelines de données fiables, environnements Cloud performants, jeux de données exploitables et protocoles expérimentaux reproductibles. Vous interviendrez à la fois sur le maintien de l'existant, son évolution et la création de nouvelles infrastructures de données. 2. Vos principales responsabilités et missions A. Data Engineering et gestion des données scientifiques Concevoir, développer et maintenir des pipelines de données complexes. Collecter, extraire, nettoyer et structurer des données brutes issues de différentes sources. Transformer les données comportementales en jeux de données exploitables pour les travaux de recherche Mettre en place des traitements automatisés pour garantir la qualité et la cohérence des données. Gérer les données temporelles et spatiales liées aux comportements et déplacements des voyageurs. Constituer et maintenir des datasets de référence pour les phases d'entraînement, de test et de validation (Train/Test/Validation). Mettre en place des dictionnaires de données enrichis et documentés. Garantir la traçabilité, le versionnement et l'intégrité des données. B. Architecture Cloud et environnement AWS Concevoir et faire évoluer l'architecture Cloud du Passenger Cognition Lab. Déployer et administrer des environnements de calcul sur AWS. Construire des environnements d'expérimentation permettant aux chercheurs de tester leurs hypothèses. Mettre en place des infrastructures automatisées avec l'approche Infrastructure as Code (IaC). Développer des environnements isolés et sécurisés pour les expérimentations. Optimiser les performances et les capacités de calcul des infrastructures. Développer des scripts de déploiement et faciliter le passage des prototypes à des environnements capables de monter en charge. Collaborer avec l'IT groupe pour faciliter le transfert des données comportementales vers ses propres environnements. C. Scientific Ops et reproductibilité des expériences Accompagner les chercheurs dans la mise en place de leurs expérimentations. Traduire les besoins scientifiques en solutions techniques adaptées. Garantir la reproductibilité des traitements et des expériences. Mettre en place des méthodes de versionnement et de traçabilité des données. Prendre en compte les biais statistiques et l'intégrité des séries temporelles. Fiabiliser les protocoles techniques utilisés dans les travaux de recherche. Faciliter l'exploitation des données pour les modèles de cognition des voyageurs. D. Documentation et accompagnement scientifique Rédiger la documentation technique des architectures et des pipelines. Formaliser les protocoles permettant de reproduire les expériences. Maintenir un wiki technique et les documents d'architecture. Produire des extractions de résultats, des figures et des métriques pour les publications scientifiques. Apporter un support technique aux chercheurs dans la valorisation de leurs travaux. Environnement technique : Cloud et Data : AWS : S3, Glue, Athena, SageMaker, EC2, Batch, RDS, IAM. SQL. Python avancé : Pandas, Polars et bibliothèques scientifiques. Manipulation de données spatiales et temporelles. Infrastructure et DevOps : Terraform. CloudFormation. Docker. Git. CI/CD. Infrastructure as Code (IaC). Documentation et collaboration : Sphinx. MkDocs. Microsoft Teams.
Voir cette offre
Freelance

Mission freelanceTECH LEAD EXPERT DATA RAG

MEETSHAKE
Publiée le
CI/CD
Clean code
Docker

1 an
Paris, France
Secteur : Édition Spécialisée & Services Technologiques | Périmètre International Type de contrat : Freelance Domaine : Intelligence Artificielle & Data Engineering Portée : France (Périmètre Européen) 1. Contexte de la Mission Aux côtés d'une équipe d'experts passionnés, vous relèverez les plus hauts défis techniques de la société. En tant qu'Expert Data & Retrieval, vous êtes le garant de la matière première de notre IA : la collecte, l'ingestion, l'indexation et la recherche de pertinence sur des volumes massifs de documents spécialisés, le socle qui alimente nos modèles de langage et nos produits. Votre terrain de jeu : transformer la manière dont tout un secteur professionnel travaille au quotidien. Votre mission n'est pas d'écrire un simple script, mais de concevoir des pipelines de données robustes capables d'ingérer, de nettoyer et d'indexer d'énormes corpus textuels, puis d'exposer une recherche rapide et pertinente (sémantique et hybride) au service de plusieurs équipes à travers l'Europe. Vous garantirez la fraîcheur des index et la qualité du retrieval tout en gérant une complexité technique de haut vol (volumétrie, hétérogénéité des sources, évaluation de la pertinence, scalabilité). 2. Objectifs et Missions Principales Vos missions principales s'articulent autour de trois axes : bâtir, outiller et transmettre. 1. Collecte, Ingestion & Indexation Pipelines d'ingestion : Concevoir la collecte et le traitement de sources hétérogènes (open data, bases spécialisées, documents métier), le parsing, le nettoyage, le chunking et la normalisation des documents. Indexation & Embeddings : Choisir et industrialiser les modèles d'embeddings, alimenter et maintenir les bases vectorielles, gérer la fraîcheur et la reconstruction des index. Qualité & Volumétrie : Garantir la scalabilité de l'indexation sur des corpus massifs et la traçabilité des données (lignage, versioning des index). 2. Recherche & Pertinence (Retrieval) Stratégie de retrieval : Combiner recherche lexicale et sémantique (BM25 + embeddings) avec reranking et filtrage par métadonnées pour maximiser la pertinence. Évaluation continue : Mettre en place des jeux de tests et des métriques de pertinence (recall, precision, nDCG, MRR) pour mesurer et améliorer le retrieval. RAG : Structurer la phase de récupération qui alimente les LLM (contexte, citations, dé-duplication, gestion des fenêtres de contexte). Observabilité & Sécurité : Instrumenter les pipelines (logs, métriques, traces de qualité) et garantir la sécurité et la conformité des données (isolation par pays, conformité aux réglementations). 3. Leadership Technique & Gouvernance Culture Craftsmanship : Promouvoir les pratiques de Clean Code, SOLID, et tests automatisés. Rayonnement : Assurer une veille constante et contribuer au rayonnement technique du groupe (articles, meetups, open-source). 3. Profil Recherché & Stack Technologique Diplôme requis : Master, Ph.D, Diplôme d'Ingénieur ou équivalent en Informatique / Data. Stack Technologique Cible (à challenger) : Langages : Python 3.11+ (maîtrise requise), Go. Indexation : Bases vectorielles (pgvector, Weaviate, Qdrant, OpenSearch), recherche hybride / BM25. Embeddings & NLP : sentence-transformers, modèles d'embeddings, tokenisation, parsing de documents. RAG & LLM : LangChain, RAG, reranking, OpenAI, Mistral, Bedrock. Data & Infra : PostgreSQL, Airflow / Spark (ou équivalent), Kafka, Redis, Docker, CI/CD, Kubernetes. Tests & Qualité : Pytest, évaluation de la pertinence (recall, nDCG, MRR). Compétences Attendues : Expérience avérée en Data Engineering / Information Retrieval sur des volumes massifs en production. Expertise Retrieval : maîtrise de l'indexation, des embeddings et de la recherche hybride, capacité à mesurer puis améliorer la pertinence. Culture Data : pipelines reproductibles, qualité et lignage des données, versioning des datasets et des index. Solide culture IA / ML : embeddings, NLP et bonne compréhension des LLM (sans nécessairement être un expert serving). Polyvalence appréciée : une appétence pour d'autres langages (Java notamment) pour prêter main-forte sur des sujets transverses est un vrai plus. Anglais fluide requis (contexte européen quotidien). 4. Soft Skills & Qualités Recherchées Vision Produit : Comprendre les enjeux métiers pour prioriser les fonctionnalités. Vos index et votre moteur de recherche sont gérés comme un produit : vous considérez les autres développeurs comme vos clients. Leadership Technique & Pédagogie : Capacité à évangéliser les bonnes pratiques data, retrieval et IA auprès des autres développeurs. Obsession de la Qualité : Rigueur absolue sur la sécurité des données et la fiabilité des services. Esprit d'Innovation : Curiosité active pour les avancées de l'écosystème IA, NLP et data. Communication : Savoir vulgariser des concepts complexes auprès de différents interlocuteurs. 5. Pourquoi ce poste est unique ? Vous intervenez au moment de la prise de décisions structurantes avec un réel pouvoir d'influence sur la stack finale. Indexer et rendre pertinent un patrimoine documentaire massif et hétérogène au service de l'IA constitue un défi data rare. L'objectif n'est pas de simplement 'livrer une feature', mais de créer le standard industriel du groupe pour les prochaines années.
Voir cette offre
Freelance

Mission freelanceChef de Projet / PMO Senior IA & Data Science

UCASE CONSULTING
Publiée le
Agent IA
JIRA

1 an
400-720 €
Île-de-France, France
🚀 Chef de Projet / PMO Senior IA & Data Science (H/F) Bonjour à tous 😀 Nous avons une nouvelle mission chez l'un de nos clients, avec un démarrage immédiat ! 📍 Localisation : Paris 📅 Démarrage : ASAP ⏳ Durée : Mission longue durée 💼 Expérience : 8 ans minimum 🌍 Environnement : International – Digital, Data, IA & Agents IA 🎯 Le contexte Dans le cadre de la montée en puissance de son portefeuille de projets IA, Data Science et Agents IA, notre client renforce ses équipes Digital Technology & Innovation / Data Science. L'objectif ? Structurer le pilotage des projets, renforcer la gouvernance et accompagner les équipes dans un environnement international en forte évolution. Vous aimez coordonner, structurer et faire avancer des projets stratégiques ? Cette mission est faite pour vous ! 🛠️ Vos missions: 📊 Pilotage du portefeuille IA & Data Science Construire et suivre la roadmap des projets. Organiser les priorités et faciliter les arbitrages. Structurer le cadrage : objectifs, jalons, KPI, charges et dépendances. Anticiper les risques et piloter les capacités des équipes. 🤝 Gouvernance & coordination Animer les comités de pilotage, points hebdomadaires, sprint reviews et ateliers métiers. Coordonner les équipes Data Science, Data Engineering, MLOps, architecture, sécurité, juridique et métiers. Assurer le suivi des projets dans Jira et produire un reporting clair et synthétique. Faciliter la prise de décision et accompagner les chefs de projet. ⚙️ Transformation & amélioration continue Réaliser un diagnostic des pratiques existantes. Définir les processus, rôles et responsabilités (RACI), standards et outils. Harmoniser les méthodes de gestion de projet et capitaliser sur les retours d'expérience. 📈 Performance, risques & budgets Suivre les indicateurs de performance, les risques, les coûts et les capacités. Accompagner la préparation des mises en production et le suivi opérationnel. Construire et suivre les budgets, plans de charge en jours-hommes et dépenses OpEx / CapEx. 📩 Intéressé(e) ? Contactez-nous pour échanger sur cette opportunité ! #TurnoverIT #Recrutement #PMO #ChefDeProjet #Data #IA #DataScience #ArtificialIntelligence #ProjectManagement
Voir cette offre
CDI
Freelance

Offre d'emploiDirecteur de projet – Risk Data Aggregation & Reporting – H/F

STORM GROUP
Publiée le

1 mois
55k-65k €
550-600 €
75002, Paris, Île-de-France
#StormYourCareer ✨ Rejoins STORM GROUP et construis ta carrière avec nous ! Propulse la gouvernance des donnéesTu rejoindras la direction stratégique d'un acteur majeur de la banque. En tant que Directeur de projet RDAR, tu joueras un rôle central dans la structuration d'un programme à plus de 10 M€, visant à révolutionner la fiabilité et la traçabilité des données de risque. Tu seras le chef d'orchestre entre les exigences réglementaires les plus strictes et les technologies Data les plus innovantes. Ton futur environnementTu évolueras à un niveau stratégique, en lien direct avec des sponsors C-Level (DSI, CRO, CFO). Tu manageras une équipe pluridisciplinaire de plus de 10 personnes (Chefs de projet, BA, Experts techniques) et coordonneras les échanges entre les métiers (Risques, Finance, Conformité) et les équipes IT/Data Engineering. Tes missions clésCadrage Stratégique et Initialisation (Phase Amont) Définition de la vision : Piloter les phases de pré-cadrage, définir le périmètre, les enjeux réglementaires et valider les études de faisabilité. Structuration : Élaborer le Business Case, définir la structure de gouvernance, la roadmap réglementaire et le découpage en workstreams (WBS). Lancement : Rédiger la charte projet, la matrice RACI et animer les ateliers de cadrage avec les parties prenantes. Pilotage de Programme et Gestion Financière Responsabilité Budgétaire : Assurer la gestion financière complète du programme (> 10 M€), incluant le forecast, l'atterrissage et la maîtrise des écarts. Pilotage du Delivery : Coordonner les chantiers métiers et techniques pour garantir la mise en conformité RDAR. Gouvernance : Assurer le reporting d'avancement auprès des instances de direction (CODIR, Comité Risques). Gouvernance de la Donnée et Coordination Technique Fiabilisation : Mettre en place les référentiels de traçabilité (data lineage), de qualité de données et cartographier les éléments critiques (CDE). Interface Data : Collaborer avec les équipes Architecture et Data Engineering sur les pipelines (Big Data, Datalake) pour valider les choix techniques. Ton profilExpertise Réglementaire : Maîtrise approfondie des normes RDAR et BCBS 239 en environnement bancaire. Direction de Programme : Expérience confirmée sur des programmes complexes à fort budget (> 10 M€) avec management d'équipes de 10+ personnes. Culture Data/IT : Solides connaissances des environnements de traitement de la donnée (ETL, Big Data, Hadoop/Spark) et des outils de gouvernance. Langues : Anglais professionnel courant. Tes AtoutsLeadership Affirmé : Capacité à fédérer des équipes transverses et à influencer des interlocuteurs stratégiques. Communication d'Excellence : Haute aisance rédactionnelle et orale, notamment lors d'échanges avec les régulateurs. Vision Systémique : Aptitude à appréhender des organisations complexes et à piloter des transformations d'envergure. Culture du Résultat : Rigueur opérationnelle et sens du collectif orientés vers le delivery et l'amélioration continue. Nos avantagesRemboursement des titres de transport à hauteur de 75%. Tickets restaurant pris en charge par STORM GROUP à hauteur de 50% (10,5€ / jour). Accès Gymlib / Wellpass (sport et bien-être). Contrat Santé / Prévoyance mis en place auprès de la compagnie Alan. Formation continue : Accès à Udemy Business. Prime de cooptation, prime d'intéressement et de participation. Deux à trois jours de télétravail par semaine. 5 raisons de nous rejoindreParcours sur mesure : Co-construis une trajectoire professionnelle unique, adaptée à tes ambitions. Missions Stratégiques : Interviens sur des projets d'envergure, en parfaite cohérence avec ton expertise. Suivi Dédié : Bénéficie d'un pilotage annuel structuré pour garantir ta progression continue. Excellence Continue : Développe tes compétences au quotidien au sein d'un écosystème exigeant. Performance Durable : Évolue dans un cadre où l'exigence métier respecte ton équilibre de vie. Notre processus de sélectionÉchange introductif avec un chargé de recrutement. Entretien métier avec évaluation technique approfondie. Rencontre finale pour validation du fit et projection sur la mission. Storm Group encourage une culture inclusive et multiculturelle où la diversité des profils nourrit notre intelligence collective. En rejoignant la Storm Team, tu intègres un écosystème engagé qui place le développement de tes talents au cœur de sa stratégie, tout en agissant concrètement pour la solidarité et la réduction de l'empreinte environnementale, aussi bien au sein de nos bureaux que dans les projets d'envergure que nous menons chez nos clients.
Voir cette offre
Freelance
CDI

Offre d'emploiAzure / On-prem Data Architect

LEVUP
Publiée le
Azure
On Premise

6 mois
Orly, Île-de-France
Dans le cadre de la modernisation de son système décisionnel, l'entreprise fait évoluer son infrastructure Data vers un modèle hybride combinant des services Cloud Azure et des environnements hébergés sur site. Historiquement construite autour des solutions SAP, la plateforme s'appuie désormais sur l'écosystème Microsoft pour accompagner cette transformation. Un nouvel environnement On-Premise basé sur Linux et un stockage objet compatible S3 est en cours de déploiement afin de garantir la maîtrise et la protection des données sensibles. L'enjeu est de structurer un socle Data évolutif, organisé par domaines métiers, tout en améliorant les performances et la gouvernance de l'ensemble de la plateforme. · Définir les architectures Data hybrides et concevoir les infrastructures On-Premise autour des technologies de stockage objet S3. · Élaborer la stratégie d'évolution du socle Data et accompagner sa mise en œuvre. · Cadrer la création des entrepôts de données par domaine métier et favoriser leur mutualisation. · Analyser l'architecture existante, identifier les axes d'amélioration et définir les trajectoires de migration. · Optimiser les performances des environnements décisionnels et proposer des solutions adaptées aux problématiques de charge Power BI. · Réaliser des études techniques, benchmarks et POC pour orienter les choix technologiques. · Définir les standards d'architecture, de développement, de sécurité et de gouvernance des données. · Accompagner les équipes dans la mise en place des pratiques DevOps, CI/CD et Infrastructure as Code. · Garantir la disponibilité, la supervision, la résilience et la conformité des plateformes Data. · Cloud & Infrastructure : Microsoft Azure, environnements Linux On-Premise. · Langages : SQL, Python, PySpark, Spark SQL, DAX, Power Query (M), Bash, YAML. · Bases de données & Stockage : Azure Synapse Analytics, ADLS Gen2, SQL Server, PostgreSQL, NAS, stockage objet compatible S3. · Data Engineering : Azure Data Factory, Azure Databricks, Apache Spark, Synapse Spark. · Orchestration : Azure Data Factory, OPCON. · BI & Dataviz : Power BI Desktop, Power BI Service, SAP BusinessObjects. · DevOps & CI/CD : Azure DevOps, Git, Terraform, Pipelines CI/CD.
Voir cette offre
CDI

Offre d'emploiData Analyst Senior SQL F/H

█ █ █ ██ █ █
Publiée le
Data analysis
DevOps
Numpy

40k-45k €
Massy, Île-de-France

Offre importée

Offre issue du marché tech, identifiée automatiquement pour vous donner une vue complète des opportunités.

Accès restreint à la communauté

Rejoignez notre plateforme pour accéder aux détails de cette offre et obtenir un accès aux meilleures offres du marché.

Voir cette offre
Freelance

Mission freelanceArchitecte Data Microsoft Fabric senior – Audit et optimisation

LeHibou
Publiée le
Delta Lake
Microsoft Entra ID
Microsoft Power BI

2 mois
650 €
Paris, France
Notre client dans le secteur Banque et finance recherche un/une Architecte Data Microsoft Fabric senior – Audit et optimisation H/F Description de la mission : Contexte Une banque indépendante dispose d'une plateforme de données en production depuis un an sur Microsoft Fabric. Elle alimente le reporting bancaire (PNB, cockpits métiers, qualité des données) et des projets réglementaires. L'équipe Data BI analytique compte 9 personnes rattachées au Head of Data : product manager, analytics engineers, data engineers et data analysts. Des key users sont présents dans chaque ligne métier. La plateforme comporte environ 180 pipelines, 600 notebooks et un package Python de fonctions partagées. Elle s'appuie notamment sur OneLake, Lakehouse, Spark / PySpark, SQL endpoint, Direct Lake et une capacité dédiée, avec une architecture médaillon Bronze / Silver / Gold. Les sources incluent le core banking SAB et Salesforce, via une couche API temps réel et DataHub Fabric. La restitution repose sur Power BI et des applications HTML interactives. L'équipe doit assurer le run et les projets 2026-2027, tout en fiabilisant le socle avant d'y adosser Fabric IQ et des agents IA. Les enjeux principaux sont la sécurisation des accès au moindre privilège, la réduction du couplage au socle partagé et la maîtrise des formats de stockage, ainsi que l'optimisation des performances et des coûts. Mission Intervenir en tant qu'architecte Data Microsoft Fabric senior pour auditer, sécuriser et optimiser le socle data. La mission est réalisée au forfait, avec des livrables mesurables et directement exploitables par l'équipe Data. Elle couvre trois chantiers pouvant être engagés indépendamment : sécurité et habilitations, socle de développement, performance, coût et durabilité. Chaque chantier est cadré, mesuré avant et après, puis clôturé par des recommandations opérationnelles et un transfert structuré à l'équipe. L'approche privilégie l'échantillonnage ciblé des traitements les plus coûteux plutôt qu'une revue exhaustive des notebooks. Principales responsabilités Auditer les workspaces, rôles, permissions, groupes Entra ID, partages, RLS / OLS, paramètres de tenant, identités, secrets, permissions des shortcuts et réseau, puis évaluer l'alignement entre Fabric et RBAC Azure. Définir une cible d'habilitations par profil, prioriser les écarts et proposer un plan de remédiation, un standard de nommage et une procédure de recertification des accès. Étudier la centralisation et la gouvernance des accès via OneLake Catalog et OneLake Security, ainsi que l'architecture d'anonymisation des données hors production. Examiner les formats de stockage par couche et définir la doctrine Delta Lake / Parquet, avec une grille de décision et un plan de convergence évaluant les impacts en performance et en coût. Diagnostiquer et optimiser les alimentations quotidiennes de plus de 30 minutes, avec mesures avant et après. Auditer les traitements les plus coûteux : configuration et dimensionnement Spark, autoscale, sessions haute concurrence, partitions, shuffle, AQE, petits fichiers, rétention, purge, archivage, OPTIMIZE et VACUUM. Revoir le code, les tests, la documentation et les bonnes pratiques ; identifier des quick wins chiffrés et refactorer des jobs pilotes. Préparer les tables pour Direct Lake et industrialiser un plan de maintenance OPTIMIZE / VACUUM. Transférer la documentation et les bonnes pratiques à l'équipe, et animer un atelier de restitution à l'issue de chaque chantier. Environnement technique Plateforme data : Microsoft Fabric, OneLake, OneLake Catalog, OneLake Security, Lakehouse, Spark, PySpark, SQL endpoint, Direct Lake, pipelines, DataHub Fabric Stockage et formats : Delta Lake, Parquet, Bronze / Silver / Gold Sécurité et Azure : Entra ID, RBAC Azure, Key Vault, RLS, OLS, private endpoints, workspace identity, service principals Traitement et performance : pools Spark, autoscale, AQE, OPTIMIZE, VACUUM Ingénierie logicielle et données : Python packagé (wheel), tests automatisés, Git, CI/CD, Power BI, modèles sémantiques Assistants de code : Claude Code, Copilot Sources et métier : SAB, Salesforce, données bancaires et comptables Livrables attendus Cartographie des accès par item et rapport d'écarts priorisé. Matrice cible des habilitations par profil, matrice Fabric / RBAC Azure, plan de remédiation séquencé, standard de nommage et procédure de recertification. Proposition de centralisation et de gouvernance des accès via OneLake Catalog et OneLake Security, ainsi qu'une proposition d'architecture d'anonymisation des données hors production. Doctrine Delta / Parquet par couche avec grille de décision et plan de convergence intégrant les impacts sur les performances et les coûts. Diagnostic et optimisation des alimentations quotidiennes de plus de 30 minutes, mesurés avant et après. Audit de performance des jobs les plus coûteux et préconisations de configuration Spark. Doctrine de partitionnement et politique de rétention par table ; plan industrialisé de maintenance OPTIMIZE / VACUUM. Revue de code, quick wins chiffrés, refactoring de jobs pilotes et mesures avant / après. Documentation, bonnes pratiques diffusables, recommandations opérationnelles et atelier de restitution à l'issue de chaque chantier. Profil recherché Expérience 8 ans et plus en data engineering ou architecture data. Avoir mené un déploiement Microsoft Fabric en production. Une expérience du contexte bancaire et des données comptables est appréciée ; la connaissance de SAB est un plus. Compétences techniques Expertise de Microsoft Fabric : Lakehouse, OneLake, Spark / PySpark, Delta Lake, SQL endpoint, Direct Lake, pipelines et gestion de capacité. Maîtrise de la sécurité Azure : Entra ID, RBAC, Key Vault, stockage et réseau, notamment les private endpoints. Compétences en ingénierie logicielle : Python packagé (wheel), tests automatisés, Git, CI/CD et revue de code. Maîtrise de l'architecture médaillon, de la modélisation, de la qualité des données et des modèles sémantiques Power BI. Usage courant des assistants de code, notamment Claude Code et Copilot. Les certifications DP-600 ou DP-700 sont appréciées. Compétences personnelles Capacité à produire des résultats mesurés avant et après. Capacité à formaliser des recommandations opérationnelles et à transférer les connaissances à l'équipe. Langues Aucune exigence linguistique précisée. Compétences / Qualités indispensables : Microsoft Fabric et architecture Lakehouse, Data engineering Spark / PySpark et Delta Lake, Sécurité Fabric et Azure (Entra ID, RBAC), Optimisation des performances et des coûts, Python, Git et CI/CD Compétences / Qualités qui seraient un + : Certifications DP-600 ou DP-700 ; expérience bancaire et des données comptables ; connaissance de SAB.Informations concernant le télétravail : Oui — 2 jours/semaine
Voir cette offre
CDI

Offre d'emploiDéveloppeur BI & Data F/H/X - CDI 39h

█ █ █ ██ █ █
Publiée le
Data Warehouse
GraphQL
JSON

38k-42k €
Anglet, Nouvelle-Aquitaine

Offre importée

Offre issue du marché tech, identifiée automatiquement pour vous donner une vue complète des opportunités.

Accès restreint à la communauté

Rejoignez notre plateforme pour accéder aux détails de cette offre et obtenir un accès aux meilleures offres du marché.

Voir cette offre
Freelance
CDI

Offre d'emploiLead Data Orchestration Engineer / Expert Apache Airflow & AWS

ALLEGIS GROUP
Publiée le
Apache Airflow
AWS Cloud
Python

3 ans
40k-45k £GB
400-550 £GB
Sochaux, Bourgogne-Franche-Comté
Dans le cadre du renforcement d'une équipe Data Platform dans le secteur automobile et financier, nous recherchons un Lead Data Orchestration Engineer / Expert Apache Airflow pour accompagner l'optimisation, la sécurisation et l'évolution d'une plateforme d'orchestration Data à forte volumétrie. La plateforme Apache Airflow sous AWS MWAA orchestre actuellement des pipelines de données bancaires couvrant 9 pays européens. Vous interviendrez autour de 4 axes majeurs : 1. Optimisation de la plateforme Airflow Optimisation d'une plateforme de 200+ DAGs en production Évolution et optimisation de la DAG Factory Migration des dépendances inter-DAGs vers les Datasets Airflow Optimisation des performances au parse-time et runtime Mise en place de tests automatisés des DAGs en CI/CD 2. Sécurisation & résilience Capacity planning et tuning Airflow Gestion des pools, scaling et rétention des logs Rotation des secrets Amélioration de l'observabilité et de l'alerting Mise en œuvre de mécanismes de résilience : retry strategies, DLQ, circuit breakers, isolation des flux 3. Étude et migration de la plateforme Benchmark des alternatives à AWS MWAA Étude d'architectures Airflow sur ECS/EKS, Astronomer, Dagster, Prefect Réalisation de POC et recommandation d'une architecture cible Pilotage d'une éventuelle migration jusqu'à la mise en production 4. Leadership & transmission Définition et application des standards techniques Mentorat des équipes Dev & Ops Formation d'une dizaine de collaborateurs Accompagnement des équipes vers des compétences Data Engineering / DataOps
Voir cette offre
Freelance
CDI

Offre d'emploiLead Data & AI Engineer – Knowledge Graph (H/F)

Oceane consulting
Publiée le
Python

15 mois
Paris, France
Missions et responsabilités1. Ontologie et Knowledge GraphConcevoir, construire et maintenir l'ontologie et le modèle de graphe de connaissances. Structurer les données techniques et métier pour leur exploitation par des agents IA. Définir la stratégie d'intégration des différentes sources de données. Assurer la connexion entre le Knowledge Graph et les systèmes d'information existants. Mettre en place les mécanismes de traçabilité, de fraîcheur et de qualité des données. 2. Data Engineering et fiabilitéConcevoir et industrialiser les pipelines d'alimentation du graphe de connaissances. Garantir la durabilité et l'exploitabilité du service : stockage persistant, sauvegarde, restauration et exploitation. Mettre en place des mécanismes de contrôle de qualité des données. Développer les contrôles de grounding permettant de vérifier que les informations produites par les agents IA sont réellement présentes dans le graphe. Garantir la fiabilité et la traçabilité des informations exploitées par les agents. 3. Intégration IA et accès aux connaissancesDéfinir des contrats d'accès sécurisés et gouvernés à la connaissance. Faciliter l'exploitation du Knowledge Graph par les agents IA, les workflows, les skills réutilisables et les outils développeurs. Collaborer avec les Tech Leads Plateforme et Agents sur les exigences d'accès, de sécurité et d'évaluation. Rationaliser les outils et interfaces de consultation de la connaissance. Mesurer les coûts et les performances des exécutions enrichies par le graphe, notamment leur latence. 4. Gouvernance et évolutionDéfinir les règles de gouvernance et de qualité des données. Collaborer avec les responsables applicatifs, les équipes de développement et les équipes Data. Garantir la cohérence et la mise à jour des connaissances. Préparer l'extension progressive du Knowledge Graph aux données et règles métier. Participer aux choix d'architecture et aux orientations techniques de la plateforme.
Voir cette offre
CDI

Offre d'emploiData engineer Databricks

Hexateam
Publiée le
Amazon S3
Apache Airflow
Apache Spark

Paris, Île-de-France
Missions principales ■ Être force de proposition et participer à la conception des solutions techniques avec les membres de l'équipe ■ Comprendre les enjeux métiers afin de concevoir des solutions répondant aux besoins fonctionnels ■ Participer aux cérémonies Agile SAFe : PI Planning, macro-chiffrage, raffinements, rétrospectives, etc. ■ Concevoir et faire évoluer les architectures de données selon l'approche Databricks Medallion Architecture (Bronze, Silver, Gold) ■ Garantir la qualité, la fiabilité et la performance des traitements en production : jobs Databricks et API ■ Contribuer à l'amélioration continue de la plateforme en proposant des optimisations, des bonnes pratiques et des innovations Activités ■ Concevoir, développer et maintenir des pipelines de données (ETL) pour les flux d'intégration et les flux métiers ■ Mettre en œuvre et orchestrer les traitements de données avec Databricks ■ Modéliser les données dans des tables Delta Lake en appliquant les bonnes pratiques de partitionnement, d'indexation, d'optimisation et de gouvernance ■ Optimiser les performances des traitements Databricks : Spark, Delta Lake, coûts et temps d'exécution ■ Assurer le développement, les tests et le déploiement des composants techniques via des processus CI/CD ■ Concevoir, développer et maintenir des API pour l'exposition et la consommation des données ■ Mettre en place des mécanismes de Data Quality, de monitoring et d'alerting ■ Identifier, analyser et résoudre les incidents de production, avec suivi des actions correctives ■ Rédiger et maintenir la documentation technique des solutions mises en œuvre ■ Accompagner les équipes dans l'adoption des bonnes pratiques de Data Engineering
Voir cette offre

Déposez votre CV

  • Fixez vos conditions

    Rémunération, télétravail... Définissez tous les critères importants pour vous.

  • Faites-vous chasser

    Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.

  • 100% gratuit

    Aucune commission prélevée sur votre mission freelance.

Voir tous les derniers posts

Au service des talents IT

Free-Work est une plateforme qui s'adresse à tous les professionnels des métiers de l'informatique.

Ses contenus et son jobboard IT sont mis à disposition 100% gratuitement pour les indépendants et les salariés du secteur.

Free-workers
Ressources
A propos
Espace recruteurs
2026 © Free-Work / AGSI SAS
Suivez-nous