Trouvez votre prochaine offre d’emploi ou de mission freelance Apache Spark

Contexte : Dans le cadre du projet de traitement de l'obsolescence Innovente côté "front", nous recherchons un développeur supplémentaire pour renforcer notre équipe. Ce projet concerne principalement les fronts "Tablette vendeur" ainsi que la version "desktop". Description du poste : Sous la supervision du responsable d’application, le candidat sélectionné participera activement aux évolutions de l’application mobile et desktop dédiée à la vente et à l'encaissement dans les magasins. Cette application, développée sur le studio "Mobile Builder" de notre partenaire Convertigo, nécessite des compétences variées pour son développement, sa maintenance et son support en production. Le candidat pourra également être amené à contribuer au support des applications développées par l'équipe.

Dans un secteur logistique en plein essor, en prise direct avec les problématiques actuelles (smart cities, environnement, géopolitique), et en pleine transformation technologique (véhicules autonomes, digitalisation, mobilité), DPD Group vous offre l’opportunité d’avoir un impact direct sur la gestion de colis du futur. Vous intégrerez l’équipe Analytics et contribuerez principalement au développement de la plateforme DataHub. Actuellement petite équipe autonome de 4 personnes engagées à 100% sur ce projet, l’équipe Analytics est intégrée au sein de l’équipe Data Science & Analytics de la DPSIN. L’objectif de la plateforme interne DataHub est de stocker les données historiques des activités et permettre leur requêtage efficient. Les données sont issues de et exploitées par divers acteurs – Marketing, Sales, OPS, IT, Data Science, … en central ou depuis les Business Units – pour des usages tels que la récupération simple de données historiques, la BI ou le machine learning. L’environnement de travail est international, avec des contacts quotidiens avec des équipes en France et à l’étranger. Les demandes d’utilisations de la plateforme croissent fortement. La plateforme DataHub en quelques faits : § 2023 : Forte croissance des usages de la plateforme (BI, requêtage ad-hoc, requêtages fréquents standardisés et hautes performances d’applications), enrichissement de l’offre de services (Data Viz avec Superset) § 2024 : Monter en charge sur les usages (plus de use cases !), étendre l’offre de services et améliorer l’expérience utilisateurs (Data Viz, Data lineage), optimiser l’usage de notre stack technique (Spark, Airflow...), généraliser l’usage de tables d’Apache Iceberg, poursuivre l’industrialisation des pipelines de traitement de données… o Les cas d’usages aujourd’hui en production : § 9 rapports BI servis § Requêtages fréquents (standardisés et tunés, avec ou sans API) par des applications :: 4 cas d’usages § Requêtage ad-hoc croissant des data scientists et équipes IT (+1000 requêtes / mois) o Volumes de données sous gestion active : § ~10 To de données § +15 flux de données § Flux de donné majeur : +100 millions d’évènements / jour d’évènements sur les colis Environnement technique : § Data Lake basé sur des technologies open source. § Architecture Cloud Kubernetes (Outscale Cloud) § Stockage des données sur du S3 (Outscale OOS) sous forme de fichiers Parquet (simples ou tables Iceberg) ou json § Query engine pour se connecter (S3 et autres DB) et requêter (SQL standard) les données : Dremio § Maintenance de tables Iceberg et requêtage de données avec Apache Spark § Automatisation des opérations et traitements de données en python avec Apache Airflow § Data Viz orientée métier avec Apache Superset § Data Viz orientée Monitoring IT avec Grafana § APIs développées en Python et Java § Gestion de version et CI/CD avec GIT Lab Organisation : § Equipe Produit de 4 personnes § Mode de travail Agile Scrum

Ingénieur de Production Linux Red Hat,Apache,Infrastructure Virtualization Trelaze. est en mesure d’intervenir au sein de l'équipe 'Run' ou 'Projet' pour répondre à des actions ponctuelles ou des expressions de besoins client allant de quelques jours à plusieurs semaine/mois. L’amplitude de travail est de 9h-18h La mission peut nécessiter des astreintes ou opérations planifiées en HNO selon les besoins clients. Votre mission s'articule de manière non exhaustive autour des sujets suivants : Installer et configurer les applications, Mettre en place, configurer la supervision et l'ordonnancement, Mettre en place, superviser et gérer les sauvegardes, Installer les packages applicatifs livrés par les TMA, Automatiser/scripter les déploiements, Participer à la rédaction des docs (DAT/DEX/doc tecniques, MODOP, etc...) Participer aux réunions projets internes ATOS et client, Participer aux réunions avec les TMA, Participer à la prise en charge et traiter les incidents N2/N3, problèmes, change et demande de service, Participer aux projets clients, Assurer la sécurité du SI, Antivirus, Patch Management, … …. Environnement technique (non limitatif): RedHat, CentOs, Apache, Tomcat, Ansible, Jenkins, Centreon, Virtualisation, Stockage HITACHI (idéalement), Sauvegarde, Java, …. Formation & Expérience : Vous disposez idéalement d'un BAC +4/5 et d'une expérience sur cette fonction de plusieurs années mais nous accordons également beaucoup d'importance au savoir être, à l'esprit d'équipe et à la capacité de chacun de monter en compétence. Qualifications : Linux Red Hat,Apache,Infrastructure Virtualization .

Missions principales (Liste non exhaustive qui pourra être complétée en fonction du besoin) Définition et gestion de tous les éléments relevant du domaine d’expertise considéré (normes, méthodes, outils, référentiels, systèmes, architectures, performances…), Conseil, assistance, formation des équipes du client sur son domaine d’expertise Veille technologique sur son domaine d'expertise Administration de niveau 3 sur le domaine d’expertise - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - -

Dans le cadre d'un projet au sein d'un client grand compte, nous sommes à la recherche d'un développeur backend SQL/clikhouse. Périmètre fonctionnel : banque d'investissement Au sein d’une équipe qui travaille sur une application d'aide à la décision pour le trading. Elle permet de gérer des données historiques sur les clients, et les données de marché, ainsi que des données intraday et des mesures de risques, il permet aussi de visualiser les axes de trading. L’application utilise Angular 15 comme front end, Java 11 et Python 2 en back end, base de donées distribuée avec un systel de cache in memory, et Mongo DB comme base de données. Pour la partie déploiement, on utilise Docker / Kubernetes et Jenkins. Les principales tâches de la missions sont les suivantes : Le but est d'développer des nouvelles fonctionnalités demandées par le trading, et aussi techniquement améliorer la stabilité et la partie calcul distribué de l'application en testant de nouvelles solutions. Le candidat sera chargé de la partie back end ainsi que de la partie devops.

Pour un client du secteur public, nous recherchons un développeur expérimenté en SOLR pour rejoindre notre équipe de développement dans le cadre d’une TMA Java/PHP. Le candidat retenu sera chargé de concevoir, développer et maintenir des solutions basées sur Apache SOLR, en collaboration avec d'autres membres de l'équipe technique qui développent sur Java Spring Boot, Vue.js et PHP. Exigences : - Expérience avérée dans le développement avec Apache SOLR, y compris la configuration, l'optimisation des performances et la mise en œuvre de fonctionnalités avancées. - Connaissance approfondie des systèmes de recherche, des index et des moteurs de recherche. - Compétences en programmation dans des langages tels que Java, Python… - Capacité à travailler en équipe, à communiquer efficacement et à résoudre les problèmes de manière autonome.

Description: L'Ingénierie de Production est en mesure d’intervenir au sein de l'équipe 'Run' ou 'Projet' pour répondre à des actions ponctuelles ou des expressions de besoins client allant de quelques jours à plusieurs semaine/mois. L’amplitude de travail est de 9h-18h La mission peut nécessiter des astreintes ou opérations planifiées en HNO selon les besoins clients. Votre mission s'articule de manière non exhaustive autour des sujets suivants : - Installer et configurer les applications, - Mettre en place, configurer la supervision et l'ordonnancement, - Mettre en place, superviser et gérer les sauvegardes, - Installer les packages applicatifs livrés par les TMA, - Automatiser/scripter les déploiements, - Participer à la rédaction des docs (DAT/DEX/doc tecniques, MODOP, etc...) - Participer aux réunions projets internes ATOS et client, - Participer aux réunions avec les TMA, - Participer à la prise en charge et traiter les incidents N2/N3, problèmes, change et demande de service, - Participer aux projets clients, - Assurer la sécurité du SI, Antivirus, Patch Management, …

MERCI DE POSTULER UNIQUEMENT SI VOUS MAITRISER L'UN DES MOTEURS DE RECHERCHES SUIVANTS: Elastic Search ou search engine Solr et/ou Lucene. Bonjour, Nous recherchons pour l'un de nos clients grand compte un Developpeur Sr Java maitrisant Elastic Search ou search engine Solr et/ou Lucene. Vos missions seront les suivantes: Ø Développer des composants, services et fonctions de notre moteur de recherche juridique et de recherche conversationnel basé sur l’intelligence artificiel (Generative AI). Ø Participer aux réunions SCRUM (daily, review…) et collaborer activement avec l’équipe au sein des sprints de 2 semaines (Scrum) Ø Participer activement avec les autres développeurs et le Techlead à la conception, l’évaluation des charges de réalisation du back-office du produit. Ø Réaliser des développements selon une stratégie de déploiement sur le CLOUD Ø Réaliser des développements dans les règles de l’art : o Participer aux réunions des équipes de développement et s’assurer que le code réalisé (backend et de l’implémentation des flux de données) est en phase avec les bonnes pratiques et les consignes en termes de choix de composants. o Faire du mentorat et promouvoir les bonnes pratiques de développement backend en partageant le savoir avec les autres développeurs de l’équipe. o S’intéresser aux contraintes d’intégration amont et aval des composants implémentés afin de réaliser un interfaçage en étroite relation avec les autres développeurs Lieu: Paris centre Dates de mission: ASAP pour 3 mois renouvelable sur du long terme Tarif: 500-650€ ht selon experiences Pas de sous traitance merci ! Nicholson

Nous recherchons un Architecte Cyber Sécurité afin d'intégrer nos équipes, pour effectuer les tâches suivantes : - Accompagnement sécurité des projets métiers et techniques de la phase d’instruction à la mise en production - Pilotage de sujets sécurité techniques et fonctionnels divers avec des correspondants techniques ou métiers suivant le projet: • Pilotage du volet sécurité de projet de déploiement d’infrastructure ou d’application dans le Cloud • Analyse des risques de sécurité liés à l’introduction de nouvelles technologies ou de nouveaux systèmes d’information • Animation de programme de Cyber Sécurité : veille, réalisation études, gestion et maitrise des risques • Définition de la cible à atteindre, réunions de travail avec les équipes techniques, pilotage des actions • Pilotage de projet technique de transformation de SI, ex : mise en place d’un DLP • Contribution aux projets études et de réalisation technique, dossiers d'architecture, etc. (tout document projet) • Accompagnement au projet, toute contribution sécurité dans les livrables de la méthode projet : o Réalisation d’étude technique o Questionnaire sécurité pour un appel d'offres o Analyse de risque sur le volet technique et organisationnel o Paragraphe sécurité dans le dossier d'architecture o Cahier des charges pour la réalisation de tests d'intrusion o Restitution des vulnérabilités pour les audits de code • Pour le pilotage de sujets techniques sécurité, tout document utile à la mise en place / amélioration de l'outil / processus Environnement technique de la prestation : M365, Spark, Hive, Hadoop

Au sein du Domaine Customer Delivery de la plateforme Supply Chain, nous cherchons un développeur fullstack expérimenté pour notre Transport Management System TMS B2C. Ce produit permet de choisir le transporteur adapté à la commande client et de gérer sa livraison et son tracking. Le contexte est international (déploiement dans différents pays), l'anglais courant est un plus. Le projet pivote et nous devons construire "from scratch" plusieurs composants. Le rôle du développeur dans l'équipe : - dév des features + run de l'existant - capacité / curiosité de comprendre le besoin fonctionnel pour trouver la solution tech qui répond au besoin - connaissances devOps - force de proposition / d'amélioration sur le code / l'architecture applicative / l'organisation de l'équipe - TU + Tests automatisés à systématiser

Êtes-vous passionné.e par le développement d'applications web robustes en Java, avec une expertise particulière dans le Framework Struts ? Nous recherchons un.e expérimenté.e qui souhaite relever de nouveaux défis et garantir l'excellence technique de nos produits. Rejoignez-nous et jouez un rôle clé dans la création d'applications web innovantes et fiables, en utilisant votre expertise en Java et Struts. 🔥 Vos responsabilités : Développement sous Java : Prendre en charge une partie des développements en respectant les règles et méthodes définies, avec une expertise avancée en Java. | Analyse et Évolution : Analyser, corriger et/ou faire évoluer les applications informatiques pour répondre aux besoins changeants du projet. Participation aux Tests : Participer activement aux différentes phases de tests, en garantissant une couverture exhaustive des fonctionnalités et en rédigeant la documentation projet associée. Collaboration en Équipe : Travailler efficacement au sein d'une équipe multidisciplinaire, en assurant une cohérence parfaite avec les objectifs du projet et en respectant les normes d'assurance qualité ISO 9001.

Contexte de la mission Le prestataire s'engage à effectuer les missions décrites dans les "Objectifs et livrables" sur les environnements d’homologation et/ou de production. Ces missions se dérouleront principalement dans le cadre de maintien en conditions opérationnelles et se feront dans le respect : De la documentation et les modes opératoires définis et industriels, Des processus opérationnels ITIL (gestion des incidents, des problèmes, des changements), Des outils et workflows mis en place par la gestion des processus. Objectifs et livrables Les missions que pourront effectuer le prestataire sont les suivantes : Sur les environnements de préproduction : Contribution à la stratégie des tests, traçabilité de ces derniers au sein des outils de support de la qualification Dans le cadre de la préparation de la Mise en Production (MEP) et/ou de Mise en Service (MES) à venir : Contribution au plan de MEP/MES, Répétition des gestes de MEP/MES en respectant les modes opératoires prévus et le cadencement duplan de MEP/MES Rédaction des tâches de changements Exploitabilité de la solution et Validation d'Aptitude au Bon Fonctionnement (VABF) : Procédures standards : Arrêt / Marche des composants, fourniture des logs, etc... Continuité / Disponibilité des composants applicatifs définissant le service concerné Supervision de la plate-forme et des composants applicatifs Stratégie de Sauvegarde et de Restauration Journalisation / Archivage / RGPD Concernant ces derniers points, ils constituent un Document Technique d'Exploitation (DTE) et des consignes opérationnelles qui seront maintenus à jour et communiqués au service ou plus largement au sein de la Direction des Opérations. Sur l'environnement de production : Réalisation de la MEP/MES et support à la Validation de Service Régulier (VSR) des projets Assurer le Maintien en Conditions Opérationnelles (MCO) dans un contexte des engagements de services définis avec les directions métiers : Gestion des incidents de production remontés par le service client, les directions métiers, nos filiales et les clients pro, le domaine Loterie ou la Direction des Opérations, Analyse et escalade en anomalie, voir problème lorsque nécessaire, Suivi des incidents pris en charge et anomalies créées Assurer de traitement de Demandes de Travaux (DMT) spécifiques

Espace-Freelance, réseau de consultants indépendants, recherche pour l’un de ses clients directs : un Data Engineer Expérimenté (H/F) – Paris Mission à pourvoir en régie sur Paris Présence sur site : 3 jours / semaine Compétences obligatoires : Python ; AWS ; PySpark ; Airflow ; Github ; anglais courant Votre mission : - Apporter une expertise sur la constitution des datasets et KPIs - Accompagner l’équipe sur les meilleurs choix techniques - Assurer la qualité des traitements et des données - Comprendre un modèle de données et s’en servir - Maitriser et contrôler la qualité de code - Mettre en place des indicateurs de mesure de qualité sur chaque développement REF : EFP/GMCPP/ODVB Plus d’offres sur :

Pour le compte de l' un de nos clients dans le domaine assuranciel, nous recherchons un Consultant/Chef de projet Cloud L’objectif de la mission est de définir et de mettre en place les principes de l’architecture des applications Cloud Native. - Définir les principes de conception d’une application dite Cloud Native en positionnant le rôle des API et du maillage de service - Définir les principes de mises en place des architectures de type microservices dont la granularité associée - Définir et accompagner la mise en œuvre du maillage de services via l’approche ServiceMesh o Recueillir les besoins et les critères permettant de faire le choix de la plateforme de ServiceMesh o Cadrer les principes et accompagner la mise en œuvre au sein de notre solution de gestion de conteneurs o Définir et accompagner la mise en œuvre des principes de développements de l’approche ServiceMesh - Définir les patterns de conception cible des applications comme Circuit Breaker, Canary Deployement, Blue/Green Deployement, A/B Testing, …. - Définir les patterns de conception d’architecture EDA et EventMesh ainsi que leurs déclinaisons opérationnelles o Recueillir les besoins et les critères permettant de faire le choix de la plateforme de gestion des évènements o Cadrer les principes et accompagner la mise en œuvre de la plateforme de gestion d’évènements - Cadrer les principes de recette et de validation de la nouvelle approche de développement qui sera choisie o Définir les principes de migration des anciens patterns de conception /développements vers la nouvelle approche - Former et accompagner le changement chez les parties prenantes - Conception de support de communication La prestation aura lieu principalement à Paris avec des déplacements réguliers sur le site du Mans et d’autres à prévoir de manière moins fréquente sur les sites de Niort, Levallois et Saran

Dans le cadre de cette prestation, les différentes activités à réaliser à chaque Incrément ou Release sont les suivantes : T1 : Élaborer l’architecture logiciel pour le projet et préparer les dossiers de conception et de justification T2 : Coordonner la conception au sein de l’équipe logiciel T3 : Piloter les développements et vérifier leur cohérence avec les principes d’architecture T4 : Garantir le respect des standards du domaine, de la politique de re-use T5 : S’assurer de la consistance et cohérence système et logiciel en liaison avec l’architecte système T6 : Garantir la testabilité de l’architecture. Participer à l’élaboration des plans de test et aux actions correctives nécessaires lors de leur exécution

Sur les environnements de préproduction : Contribution à la stratégie des tests, traçabilité de ces derniers au sein des outils de support de la qualification Dans le cadre de la préparation de la Mise en Production (MEP) et/ou de Mise en Service (MES) à venir : Contribution au plan de MEP/MES, Répétition des gestes de MEP/MES en respectant les modes opératoires prévus et le cadencement du plan de MEP/MES Rédaction des tâches de changements Exploitabilité de la solution et Validation d'Aptitude au Bon Fonctionnement (VABF) : Procédures standards : Arrêt / Marche des composants, fourniture des logs, etc... Continuité / Disponibilité des composants applicatifs définissant le service concerné Supervision de la plate-forme et des composants applicatifs Stratégie de Sauvegarde et de Restauration Journalisation / Archivage / RGPD Sur l'environnement de production : Réalisation de la MEP/MES et support à la Validation de Service Régulier (VSR) des projets Assurer le Maintien en Conditions Opérationnelles (MCO) dans un contexte des engagements de services définis avec les directions métiers : Gestion des incidents de production remontés par le service client, les directions métiers, nos filiales et les clients pro, le domaine Loterie ou la Direction des Opérations, Analyse et escalade en anomalie, voir problème lorsque nécessaire, Suivi des incidents pris en charge et anomalies créées Assurer de traitement de Demandes de Travaux (DMT) spécifiques