Trouvez votre prochaine offre d’emploi ou de mission freelance Data Engineering

Contexte : renfort au sein des équipes data, sur un périmètre mêlant développement et exploitation. Environnement exigeant : volumes importants de données financières, forte dépendance des équipes de recherche et de trading à la fraîcheur et à la fiabilité des données. Le rôle : Développement Python sur des projets data / data engineering (évolutions, outillage, industrialisation) Support de production niveau 2 : investigation d'incidents sur les pipelines (analyse de logs, identification des causes, correctifs, replays) Gestion des alertes et suivi des traitements Sujets de data quality : contrôles sur les flux entrants, détection d'anomalies, fiabilisation

Nous recrutons un(e) Data Engineer / Data Scientist en CDI. Dans le cadre d'un projet de longue durée, nous recherchons un(e) Data Engineer / Data Scientist pour rejoindre une équipe en charge de la conception, du développement et de l'industrialisation de modèles prédictifs. Localisation : Région de Toulouse Contrat : CDI uniquement (pas de freelance) Vos principales missions : Recueillir les besoins auprès des équipes métiers. Concevoir des maquettes et des tableaux de bord. Développer, tester et industrialiser des modèles prédictifs. Développer et industrialiser des outils, des fonctionnalités et des librairies techniques. Profil recherché : Solide expérience en développement Python. Expérience en Data Engineering et/ou Data Science. Expérience dans le développement de modèles prédictifs et de dashboards. Bonne maîtrise de Databricks. Excellentes capacités de communication pour échanger avec les équipes techniques et métiers. Une connaissance de l'environnement avionique, notamment ATA21, est un atout. Ce poste est ouvert uniquement en CDI. Les candidatures de freelances ne seront pas étudiées. Nous recherchons idéalement une personne déjà installée dans la région de Toulouse.

Dans le cadre de la réalisation d'un projet en assistance technique, nous recherchons un(e) Product Owner Solutions IA pour l'un de nos clients. Vous interviendrez sur le site client situé à proximité de la métropole lilloise (59). À ce titre, vos missions quotidiennes seront les suivantes : - Définir la vision produit, construire et prioriser le backlog, rédiger les User Stories et piloter la roadmap des produits IA de bout en bout ; - Animer les cérémonies Agile / Scrum et Kanban (Sprint Planning, Sprint Review, Rétrospective) et assurer le delivery en coordination avec les équipes Data Science, IT et métiers ; - Piloter des cas d'usage IA intégrant des notions de Machine Learning, IA Générative, LLM, RAG, Agents IA et modèles prédictifs, en lien avec les problématiques de scoring crédit et de risque ; - Assurer l'interface entre les équipes techniques (MLOps, Data Engineering) et les métiers, en vulgarisant les sujets techniques auprès des parties prenantes.

Notre client s'appuie sur une équipe Data centrale pour exploiter une grande diversité de sources de données et générer des indicateurs à forte valeur ajoutée au service de ses activités. Dans le cadre du renforcement de son équipe Data Platform, nous recherchons un(e) Senior Cloud Data Platform Engineer qui contribuera à l'optimisation et à l'évolution de la plateforme data cloud, garantissant une intégration fluide des données à l'échelle de l'organisation. Vos missionsConcevoir et développer des templates d'Infrastructure as Code (IaC) avancés et réutilisables pour provisionner et gérer les ressources cloud, selon les meilleures pratiques et des standards d'architecture robustes. Architecturer des blueprints applicatifs complets permettant des workflows de data engineering scalables et fiables. Maintenir les projets AWS existants et accompagner les Data Engineers de l'organisation dans l'utilisation de la plateforme, en lien avec l'équipe Data Support.

Notre client, acteur majeur de la finance quantitative à Paris, renforce son équipe Data Reliability. Constituée il y a quatre ans et composée de 6 personnes (bientôt 7), cette équipe applique les principes du SRE au monde de la donnée : elle prend en charge l'ensemble des activités de support liées à la data afin de décharger les équipes de développement et de data engineering des problématiques de production. Environnement international (plus de 70 nationalités, bureaux à New York et Londres), pratiques de support structurées et process ITIL en place. Missions Assurer le support de production N2/N3 sur les domaines data : prise en charge des alertes et des incidents pendant le shift Paris, avec obligation de résultat Investiguer et résoudre les problèmes de qualité de données : données manquantes, valeurs fausses ou nulles, incohérences entre systèmes Explorer et analyser la donnée en Python (notebooks) et en SQL pour diagnostiquer les anomalies Développer et maintenir des scripts de monitoring en Python pour détecter les anomalies en amont Requêter la base Oracle centrale de l'écosystème (requêtes et jointures) ainsi que les autres sources de l'environnement hybride Faire remonter et documenter les problématiques de données récurrentes, contribuer à leur traitement à la source avec les équipes data engineering Contribuer aux pratiques de data reliability engineering de l'équipe : automatisation des tâches récurrentes, amélioration continue du monitoring et des procédures Interagir au quotidien avec les data engineers, les développeurs et les chercheurs quantitatifs, en français et en anglais

Data & AI Engineer (Data Engineering / AI Engineering) Qui sommes-nous ? Fondée par des experts techniques et portée par des passionnés de l'IT, Big APPS est une société de conseil spécialisée dans la Data, le Cloud, le DevOps et l'Intelligence Artificielle (IA). Nous accompagnons nos clients dans leurs projets de transformation digitale en concevant des plateformes de données performantes et des solutions innovantes basées sur l'IA. Nous intervenons sur des projets à forte valeur ajoutée en mettant en œuvre les technologies les plus récentes et les meilleures pratiques du marché. Dans le cadre de notre croissance, nous recherchons un(e) Data & AI Engineer pour renforcer nos équipes. Vos missions En tant que Data & AI Engineer, vous serez amené(e) à : Concevoir, développer et maintenir des plateformes de données robustes et évolutives. Développer et optimiser des pipelines de données (ETL/ELT). Concevoir des architectures Data sur Azure, AWS ou GCP. Préparer, transformer et valoriser les données pour les projets d'IA. Développer, intégrer et industrialiser des modèles de Machine Learning et d'IA générative. Participer au déploiement des modèles en production (MLOps). Collaborer avec les équipes métiers, Data Science et Cloud. Mettre en œuvre les bonnes pratiques DevOps, CI/CD et Infrastructure as Code. Garantir la qualité, la sécurité et la disponibilité des données. Que vous soyez Data Engineer, AI Engineer, Data Scientist ou déjà doté(e) d'une double compétence Data & IA, vous souhaitez intervenir sur des projets innovants mêlant Data Engineering, Machine Learning, IA Générative et Cloud ? Rejoignez Big APPS !

Définir et piloter la vision produit, la stratégie et la roadmap de la plateforme Data. Accompagner l'évolution d'un écosystème Data & Analytics moderne basé sur le Cloud. Promouvoir une approche orientée Data Products. Collaborer étroitement avec les équipes Architecture, Data Engineering et les métiers afin de développer des capacités Data évolutives. Garantir la performance, la fiabilité, la scalabilité et l'optimisation des coûts de la plateforme. Coordonner les équipes internes ainsi que les partenaires technologiques. Veiller à l'application des bonnes pratiques en matière de gouvernance des données, de sécurité et de conformité. Contribuer aux programmes stratégiques de transformation Data de l'entreprise.

Dans le cadre du développement de ses initiatives autour de l'Intelligence Artificielle, du Data Engineering et du développement Python, notre client, grand groupe bancaire, recherche un(e) Lead Architecte IA, Data & Python. Référent(e) technique sur ces sujets, vous accompagnerez les équipes projets dès les phases de cadrage et de conception, concevrez les architectures IA et Data, et définirez les standards et patterns de référence (Machine Learning, RAG, Agents IA, IA Générative, MLOps/LLMOps, APIs IA). Vous réaliserez les études d'architecture et les choix technologiques, garantirez l'intégration des solutions IA dans le système d'information, et veillerez à la gouvernance et à la conformité des projets (RGPD, AI Act, sécurité). Sur le volet Python, vous définirez les standards de développement, accompagnerez les équipes sur Python avancé, FastAPI, Flask, Django, PySpark et Pandas, réaliserez des POC et prototypes, et mettrez en place les bonnes pratiques de qualité de code, tests, sécurité, performance et CI/CD. Sur le volet Data Engineering, vous concevrez les pipelines de traitement des données, définirez les architectures d'échange et d'intégration, garantirez la qualité des données et superviserez la mise en œuvre des plateformes Data, en vous appuyant notamment sur Spark, Kafka, Airflow, DuckDB et Trino. Enfin, vous contribuerez à la gouvernance et à l'innovation en construisant le catalogue de patterns IA et Data, en assurant une veille technologique permanente et en animant les communautés Data et IA.

ContexteDans le cadre du renforcement de ses équipes, notre client recherche un Développeur Python Senior pour participer au développement et à l'évolution d'applications stratégiques dans un environnement Agile. Vous contribuerez à la conception, au développement et à l'optimisation de solutions backend robustes, sécurisées et performantes. Vos missionsDévelopper et maintenir des applications backend en Python. Participer à l'analyse des besoins et à la conception des solutions techniques. Collaborer avec les Product Owners, Business Analysts et équipes métiers. Développer des API performantes avec FastAPI (ou framework équivalent). Assurer la qualité du code, les tests et les déploiements via des pipelines CI/CD. Réaliser les revues de code et accompagner les développeurs juniors. Diagnostiquer et résoudre les incidents techniques complexes. Collaborer avec les équipes DevOps et Data Engineering. Garantir la sécurité, la scalabilité et la maintenabilité des applications. Participer aux travaux de refactoring et à l'amélioration continue.

CONTEXTE Au sein d'un acteur du transport en commun, la mission consiste à intervenir comme référent architecture et Tech Lead auprès des squads projets. Le consultant accompagnera les projets Data de la phase de cadrage jusqu'à la mise en production, en garantissant les choix d'architecture, la qualité des développements et l'application des bonnes pratiques sur un socle AWS / Databricks. Missions principales / Responsabilités • Accompagner les squads métiers dès le cadrage et jusqu'à la mise en service des cas d'usage • Challenger les choix techniques et architecturaux des projets • Assister les Tech Leads dans la définition des architectures et la rédaction des DAT • Concevoir et optimiser des pipelines d'ingestion et de transformation de données • Garantir les bonnes pratiques de développement, de performance, de FinOps et d'éco-conception • Contribuer à l'amélioration des frameworks et briques techniques de la plateforme • Participer au MCO des applications Data et intervenir en support N3 • Réaliser des PoC, audits techniques et études d'architecture Livrables attendus • Architectures solution • DAT • Pipelines d'ingestion et de transformation de données • PoC • Audits techniques • Études d'architecture Compétences / Qualités indispensables : Databricks, AWS, Spark / Scala, Architecture Solution Data, Data Engineering, Scrum Agile Compétences / Qualités qui seraient un + : Data Mesh, Power BI, FinOps, éco-conception numérique, industrialisation Data Platform, PoC et études d'architecture, accompagnement de squads Agile Informations concernant le télétravail : Oui — 2 jours/semaine

Dans le cadre du développement de ses plateformes Data & IA, notre client recherche un Data Engineer Databricks Senior capable de concevoir, développer et industrialiser des pipelines de données à grande échelle. Le consultant interviendra sur l'ensemble du cycle de vie des projets Data, en lien avec les équipes métiers, Data Scientists, Architectes et équipes Cloud. MissionsRecueillir et analyser les besoins métiers. Concevoir des architectures Data modernes sur Databricks. Développer et maintenir des pipelines d'ingestion et de transformation. Optimiser les performances et la qualité des traitements. Participer à la mise en place des bonnes pratiques Data Engineering. Assurer les phases de tests, recette et mise en production. Collaborer avec les équipes Data Science, BI et Architecture. Contribuer aux sujets IA et valorisation des données. Documenter les solutions et accompagner les utilisateurs. Compétences requisesTechniquesDatabricks (indispensable) Apache Spark / PySpark Python SQL avancé Azure Data Factory ou équivalent Azure Synapse / Microsoft Fabric (apprécié) Git CI/CD Data Lake / Lakehouse Modélisation de données FonctionnellesAnalyse des besoins métiers Animation d'ateliers Rédaction de spécifications Communication avec des interlocuteurs non techniques

Résumé : Le rôle consiste à gérer le cycle de vie des applications et leur déploiement sur AKS, en mettant à profit l'expertise en Data Engineering pour développer des solutions techniques adaptées. Responsabilités : * Développer une application de gestion du Datalake Azure en automatisant l'interfaçage avec les APIs Azure et systèmes internes via micro-services. * Développer en Java/Spring pour déploiement sur Kubernetes. Must Haves : * Expertise en Dev Java/Spring sur Azure. * Connaissance des environnements Kubernetes (AKS) et de la stack ELK. * Expérience avec des plates-formes Data de grande envergure (Stockage, Réseau, Calcul distribué, Sécurité). Nice to Haves : * Connaissez les SDK Azure et les frameworks comme Spring et Temporal. * Familiarité avec des BDD comme PostgresSQL et MSSQL. Autres détails : * Environnement Technique: Azure, AKS, ELK. * Livrables Attendus: SDK Azure Java, frameworks, et documentations Azure.

Contexte de la mission : Nous recherchons un Architecte IA / MLOps pour rejoindre une DSI en pleine transformation autour de l'intelligence artificielle. Vous intégrerez le Pôle Architecture Logicielle & IA et participerez à la conception, au cadrage et à l'industrialisation de solutions d'IA à forte valeur ajoutée. Votre rôle sera d'accompagner la mise en œuvre d'architectures IA robustes et évolutives, couvrant aussi bien le Machine Learning traditionnel que l'IA générative (LLM, RAG, Agents IA), tout en garantissant leur intégration au système d'information, leur gouvernance et leur exploitation en production. Vous interviendrez en étroite collaboration avec les équipes Data Engineering, Architecture, Développement et les différents métiers afin d'accélérer l'adoption de l'IA à l'échelle de l'entreprise. Les avantages de la mission : Mission longue avec une forte visibilité. Participation à la stratégie IA d'un grand acteur du secteur financier. Interventions sur des sujets innovants autour de l'IA générative et des architectures de nouvelle génération. Environnement technique moderne et orienté industrialisation. Collaboration avec des équipes expertes en Data, Cloud et Architecture. Forte autonomie et rôle clé dans les choix techniques. Télétravail partiel avec 2 à 3 jours de présence par semaine sur site à Toulouse. Opportunité d'avoir un impact concret sur les futurs usages IA de l'entreprise.