Trouvez votre prochaine offre d’emploi ou de mission freelance Apache Spark

Profil recherché : Chargé de déploiement / Accompagnement au changement / Formation Contexte : la mission s'inscrit dans le Pôle Téléphonie du Département Production qui pilote le remplacement de la solution de téléphonie des centres d'appels (historiquement Genesys) par une nouvelle solution basée sur Asterisk. Le déploiement doit couvrir, d'ici mi-2028, l'ensemble des Agences de Conduite Régionales (ACR), des Agences de Supervision et de Gestion des Accès Réseau et du Dépannage (ASGARD) et des Cellules de Préparation des Activités (CPA). Le titulaire accompagne les utilisateurs dans la prise en main du nouvel outil et appuie le chef de projet sur le volet opérationnel du déploiement en région. Missions principales : Accompagnement des opérations de migration en physique, présence sur site lors des bascules (25% du temps) ; Coordination des actions pendant les opérations de migration (25%) ; Formation des utilisateurs au nouvel outil SPARK, bandeau téléphonique (40%) ; Reporting au chef de projet (10%). En complément, pilotage et coordination des déploiements techniques connexes réalisés par des tiers (Bouygues Télécom, NXO), avec respect des jalons et coordination des acteurs. - Culture Agile (1).

Au sein d'une équipe spécialisée en Data et Intelligence Artificielle, vous intervenez sur des problématiques à forte dimension technique autour de la gestion de données, de l'Information Retrieval et de l'IA générative. Votre mission consiste à concevoir et industrialiser les pipelines permettant de collecter, transformer, indexer et rechercher de grands volumes de données, afin d'alimenter des applications basées sur les LLM et les architectures RAG. Vous serez également impliqué dans les choix d'architecture, l'amélioration de la pertinence des recherches et l'industrialisation des solutions en production. Vos principales missions Data Engineering & Indexation Concevoir et industrialiser des pipelines d'ingestion de données provenant de sources hétérogènes. Mettre en œuvre les traitements de parsing, nettoyage, normalisation et chunking. Concevoir et maintenir des systèmes d'indexation à grande échelle. Mettre en œuvre des bases vectorielles et des embeddings. Garantir la qualité, la fraîcheur, la traçabilité et la scalabilité des données et des index. Retrieval & RAG Concevoir des stratégies de recherche sémantique et hybride. Combiner recherche lexicale (BM25), embeddings, filtrage et reranking. Mettre en place des indicateurs de pertinence : Recall, Precision, nDCG, MRR. Optimiser les mécanismes de Retrieval alimentant les LLM et architectures RAG. Travailler sur la gestion du contexte, la déduplication et la qualité des résultats. Architecture & qualité Participer aux choix techniques et à l'évolution de la stack Data/IA. Mettre en place les bonnes pratiques de développement : Clean Code, SOLID, tests automatisés. Assurer l'observabilité des pipelines et des services. Contribuer à la sécurité et à la conformité des données. Accompagner techniquement les équipes et partager les bonnes pratiques. Environnement technique Indispensable : Python 3.11+ Data Engineering / Information Retrieval Embeddings / NLP Recherche sémantique et hybride RAG / LLM Bases vectorielles : Qdrant, Weaviate, pgvector, OpenSearch PostgreSQL Tests avec Pytest Environnement apprécié : LangChain OpenAI, Mistral, Amazon Bedrock BM25 / reranking Kafka Redis Airflow / Spark Docker / Kubernetes CI/CD Go ou Java

Data Engineer Location: Thorpe Park, Leeds, United Kingdom, Hybrid working Unfortunately we are unable to offer sponsorship for this role. Join us as a Data Engineer! If you enjoy getting under the hood of data, solving complex problems and finding better ways of doing things, this could be a great opportunity for you. As our Data Engineer, you'll help shape and maintain the data infrastructure that supports decision-making across Lowell. You'll work hands-on with SQL, SSIS, ETL processes and large datasets, ensuring our data warehouse is accurate, efficient and scalable. You'll also have the freedom to identify opportunities to automate processes, improve performance and introduce new solutions, working closely with stakeholders to turn complex data into clear, useful insights. What we are looking for: Intermediate or above experience with SQL, Python and Power Shell would be an advantage. Confident working with large and complex datasets. Experience working with a range of stakeholders, understanding their needs and translating them into data solutions. Strong communication skills, with the ability to interpret complex data and turn it into a clear, meaningful story. A curious, problem-solving mindset and a drive to find better, more efficient ways of working. If you're excited about this role but don't meet every requirement - don't worry, still apply. Your unique perspective could be just what we're looking for. What you'll get: A discretionary annual bonus to reward your impact 3% flexible benefits that you can tailor to suit your lifestyle, whether that's extra cash, more holiday, or added health cover. Hybrid working for the best of both worlds-collaboration and focus. Free onsite parking, saving you time and money. Recharge and refresh opportunities with 28 days of holiday plus public holidays, and the option to buy up to five more-giving you more time for what matters most. Peace of mind with life assurance that supports your loved ones, no matter what. A culture that celebrates you and supports your wellbeing - with recognition awards, access to on-site gym facilities, and a variety of wellbeing initiatives offered throughout the year to help you stay balanced, resilient and feeling your best. Encouragement to be your authentic self at work by joining one of our vibrant employee networks-like Rise (Gender), Proud (LGBTQIA+), Culture, or Spark (Neurodiversity & Disability) - and connect with a community that celebrates and supports you. So, who are we? We're Overdales Legal. Regulated by the SRA, we're one of the largest providers of specialist debt Litigation services in the UK. We're a proud member of Lowell Group. We're on a mission to make credit work better for all. We buy debt from lots of different companies in all kinds of sectors. We treat people with dignity, helping customers pay off their Lowell debt in practical and affordable ways. According to The Sunday Times, we're one of the best places to work in the UK, (we're proud to be on their 'Best Places to Work' list for the third year running). Why? Because of the people who work here. Warm, welcoming, and super-talented. It's our people that make us great. We celebrate and share success, learn from failure, embrace change, and savour challenge. Join us and from day one you'll have a voice in one of the most dynamic companies in the UK finance sector. Our new colleagues tell us they love the support we give them and the recognition they receive for a job well done. And wherever you are in Lowell, you'll be making a difference to the lives of millions of people going through tough times. Ready to join us? At Lowell, we're committed to helping you grow-both personally and professionally. We provide the tools, support, and opportunities you need to shape your career and thrive. We welcome people from all backgrounds and experiences. Whatever your identity - culture, gender, sexual orientation, religion, ethnicity, age, neurodiversity, or disability - if you're passionate about making credit work better for everyone, we'd love to hear from you. Our strength lies in our people, and we're proud to build inclusive teams supported by benefits that help everyone succeed. Apply today and help us turn complex data into meaningful insights that make a real difference. If you need help with your application or have any questions about the adjustments we can make to support you during the recruitment process, please contact a member of the Lowell Talent Team, who'll be more than happy to support you. #HYBRID

🚀 Qui sommes-nous ? Finaxys est un cabinet de conseil spécialisé dans les secteurs Banque, Finance et Assurance. Depuis plus de 15 ans, nous intervenons auprès des plus grandes institutions telles que BNP Paribas, Crédit Agricole, Société Générale, AXA, Malakoff Humanis, etc. en proposant des solutions technologiques innovantes (IA, Machine Learning, Data, Cloud, DevSecOps, etc.). Notre mission ? Accompagner nos clients dans leur transformation digitale et répondre aux défis IT les plus complexes grâce à l'expertise de nos équipes. 🎯 Votre mission : En tant que MLOps, vous rejoindrez les équipes techniques de nos clients grands comptes pour : Concevoir, développer et maintenir les socles, plateformes et outils Big Data / MLOps afin d'accompagner le développement des usages Data et IA. Participer aux projets de migration et d'évolution des plateformes Big Data (OS, Spark, Cloudera, Hadoop). Contribuer à l'amélioration continue des outils MLOps et au développement de nouvelles solutions adaptées aux besoins des utilisateurs. Participer au cadrage technique et à la définition des architectures et solutions applicatives. Assurer le développement, l'intégration et la recette technique des solutions sur les environnements Big Data / MLOps. Superviser, optimiser et améliorer les performances, la scalabilité et la fiabilité des plateformes existantes. Accompagner les utilisateurs dans l'utilisation des plateformes Big Data et des outils MLOps, notamment sur les problématiques d'accès aux données. Assurer le traitement des incidents, le support technique et l'assistance fonctionnelle auprès des utilisateurs. Collaborer étroitement avec les équipes Data, IA, métiers et IT afin de garantir des solutions performantes et adaptées aux besoins. Contribuer à l'automatisation des processus et à l'amélioration continue des pratiques de développement et de déploiement. Environnement technique / fonctionnel : Big Data, Hadoop, Cloudera, Spark, Python, Scala, Bash, GitLab, Jenkins, Ansible, Nexus, Sonar, Kubernetes, Elasticsearch, Logstash, Kibana, MLflow, Airflow, TensorFlow, MLOps, Data / IA.

En quelques motsCherry Pick est à la recherche d'un "Data Engineer Databricks (H/F) " pour un client dans le secteur du Retail Description🏢 Le Contexte : Passer à l'Échelle la Data Factory Supply ChainAu sein de la filiale informatique d'un groupe majeur de la grande distribution, la Data Factory réunit les équipes IT et les directions métiers pour concevoir, développer et déployer des produits analytiques et Data Science à forte valeur ajoutée. Afin de répondre à une demande croissante, l'organisation s'industrialise et adopte un modèle Agile à l'échelle (Domaines, Tribus, Squads). Vous intégrerez la squad Supply / Logistique, responsable de la création de cas d'usage stratégiques dédiés à l'optimisation des flux, à la gestion des entrepôts et à la performance logistique. Nous recherchons un(e) Data Engineer Confirmé / Senior évoluant sur une plateforme Cloud Azure / Databricks. Ce poste exige une réelle polyvalence : au-delà de la construction des pipelines de données, vous serez le garant de la qualité (QA/Testing) et participerez activement à la restitution décisionnelle. 🎯 Vos Missions : Pipelines, Data Warehouse, QA & RestitutionRattaché(e) à la squad Supply Chain, vos activités couvrent tout le cycle de vie de la donnée : 1. Data Engineering & Cloud Architecture (Majeure) : Concevoir et construire de manière industrielle les pipelines de données (ETL/ELT) pour transformer, enrichir et ingérer les données dans le Data Lake. Développer des notebooks Databricks (Spark / Python) pour assurer des traitements massifs complexes. Mettre en œuvre et optimiser les solutions de Cloud Data Warehousing (tuning de requêtes SQL, modélisation de tables). Assurer la livraison continue des développements dans un environnement DevOps intégrant les processus CI/CD (Azure DevOps). 2. QA, Testing & Qualité de Code : Assurer la QA et le testing des pipelines développés par le second Data Engineer de la squad. Concevoir et exécuter les tests unitaires, d'intégration et de non-régression. Réaliser des revues de code rigoureuses pour garantir le respect des bonnes pratiques et des standards d'ingénierie. 3. Data Analyse & Restitution Decisionnelle : Participer au recueil des besoins métiers et mener les analyses de données en amont. Concevoir et développer les tableaux de bord sous Power BI pour restituer les indicateurs Supply Chain aux opérationnels. Rédiger la documentation technique (Dossiers d'Analyse Technique, release notes).