Trouvez votre prochaine offre d’emploi ou de mission freelance Apache Pig

💡 Contexte /Objectifs : L'entité a pour charge la maintenance, le support et l'évolution de l'outil concernant le pilotage financier de la banque, des directions centrales et de la facturation interne du groupe. Les outils sont basés sur les technologies Big Data pour le stockage, Talend et Spark/Scala pour les traitements, la suite MSBI SQL Server et cube SSAS pour l'analyse mutlidimensionnelle et enfin du Power BI pour la restitution. Le Bénéficiaire souhaite mettre en œuvre plusieurs évolutions de son socle technique. A ce titre, le Bénéficiaire souhaite bénéficier de l'expertise du Prestataire en termes de Data Engineering. Dans ce cadre la prestation consiste à contribuer à/au(x) : - Support de l'application (notamment lors des clôtures mensuelles) - La maintenance évolutive - La conception et l'implémentation de nouvelles fonctionnalités - La refonte technique - La migration de Talend vers Spark/scala Environnement anglophone 2 - Livrables attendus Les livrables attendus sont : - Optimisation des performances - Le support de l'application et la documentation - La livraison des evolutions - La livraison des nouvelles fonctions demandées dans le cadre des projets.

💼 Poste : Bigdata Engineer Cloud 🏭 Secteurs stratégiques : Banque d’investissement 📍Localisation : Ile de France 🗓 Démarrage : ASAP Expérience souhaité : 0 - 3 ans Principales missions sont : Création et maintenance des architectures Big Data pour les besoins interne de l’entreprise. • interaction avec REST APIs • Kafka • gestion des jobs et administration Ansible • Technologies Confluence /JIRA pour la gestion documentaire, Git /Bitbucket Création et maintenance des architectures Big Data pour les besoins interne de l’entreprise. • interaction avec REST APIs • Kafka • gestion des jobs et administration Ansible • Technologies Confluence /JIRA pour la gestion documentaire, Git /Bitbucket

Missions Principales Gestion de la Production Legacy : Surveillance, maintenance et optimisation des systèmes legacy existants. Administration Système : Installation, configuration et gestion des serveurs Linux. Gestion des Serveurs d'Applications : Administration et optimisation des serveurs Tomcat. Automatisation : Développement de scripts d'automatisation pour améliorer l'efficacité des processus. Sécurité : Mise en œuvre et surveillance des mesures de sécurité pour garantir l'intégrité des systèmes. Support Technique : Résolution des incidents techniques et support aux équipes internes. Documentation : Rédaction et mise à jour de la documentation technique.

Basée à Lille, Lyon, Nantes, Grenoble et Bruxelles, Insitoo Freelances est une société du groupe Insitoo, spécialisée dans le placement et le sourcing des Freelances IT et Métier. Depuis 2007, Insitoo Freelances a su s’imposer comme une référence en matière de freelancing par son expertise dans l’IT et ses valeurs de transparence et de proximité. Actuellement, afin de répondre aux besoins de nos clients, nous recherchons un Ingénieur de production Middleware (H/F) à Lyon, Auvergne-Rhône-Alpes, France. Contexte : Fonctionnement : sur site à Lyon + Télétravail Les missions attendues par le Ingénieur de production Middleware (H/F) : Responsabilités : Réalisation d’audits réguliers Support et accompagnement aux choix techniques Supervision/monitoring (temps réel et prédictif) / alertes Support en escalade des incidents et des demandes Contribution active aux crises applicatives et à la gestion des problèmes Sécurisation de l’exploitabilité des applications Contribution aux chantiers d'industrialisation et outillage QUALITÉS REQUISES : Ingénieur de production, Expert Middleware, Administrateur système ou administrateur de serveurs d’application, tu disposes d'une première expérience sur un poste similaire. Tu maîtrises ou a minima es familiarisé à plusieurs serveurs d'application et serveurs Web (Weblogic, Apache, Tomcat, Jboss, Springboot...), et disposes d’une expérience d’analyse de JVM. Si tu es un profil DEV avec l’envie de te confronter aux enjeux de l’OPS, n’hésite pas non plus à postuler, nous saurons t’accompagner. Une connaissance des solutions F5 ou de Kubernetes serait un plus.

Nous recherchons un Expert Kafka/Elastic Contexte: Dans le cadre de l’évolution de son système d’information, le client a identifié le besoin de s’adjoindre l’expertise d’une société de prestation de services disposant de compétences avérées en matière d'expertise Kafka / Elastic pour développer, industrialiser et automatiser la plateforme Kafka / Elastic. Prestations attendues: Assister et conseiller dans le choix et l’utilisation des méthodes Informer sur les évolutions Former aux nouvelles technologies et systèmes Participer aux études et développement & conduite d’études ponctuelles Gérer des normes, méthodes, outils et référentiels Mettre en place les normes, méthodes et outils et en vérifie l'application Certifier des composants et applications développées Expertises attendues: Apache Kafka Confluent sur Kubernetes Openshift. Stack Elastic type ELK sur Elastic Cloud Enterprise. Socle Ansible/Python pour l’industrialisation des solutions. Prometheus/Grafana pour la supervision. C35 Ecosystème comprenant des outils open-sources comme AKHQ ou KafkaGitops. Livrables attendus: Dossiers d'expertise Référentiels domaine d'expertise

Titre du poste Administrateur Systèmes Linux H/F (CDI). Localisation : Louviers (27) Fourchette de salaire : Entre 34 et 38K€ selon expérience. Date de démarrage : Immédiate (bien-entendu, on vous attend si vous avez un préavis). Alors, vous nous rejoignez ?! Votre maîtrise de l’environnement de production et des systèmes Linux vont vous permettre de prendre en charge l’administration de l’infrastructure en toute autonomie De belles missions vous attendent chez notre client sur des environnements riches et challengeants : · Gestion et administration des environnements de production Linux, infrastructures et applications. · Traitement des incidents de niveau 3 · Participation active dans le cadre des projets d’évolutions techniques, · Création de scripts d’installation sur les serveurs d’application, · Automatisation et intégration continue avec Jenkins · Optimiser la performance systèmes et applicatifs · Participation aux phases de validation technique lors des mises en production, · Rédaction de documentations techniques et procédures d’exploitation

Dans le cadre d’une réorganisation et d’une migration des solutions vers du SaaS, nous rechercherons pour notre client un Data Engineer. Vos différentes missions : Votre principale mission sera de concevoir et maintenir l’infrastructure de données, tout en mettant l’accent sur les différents aspects : Utilisation des données pour soutenir notre produit SaaS en standardisant les données. Développement de flux de traitement en tenant compte des exigences d'interface contractuelles. Conception, développement et déploiement de pipelines de données robustes et évolutifs. Mise en œuvre de stratégies de traitement et de gestion des données pour garantir leur qualité, leur fiabilité et leur sécurité. Documentation approfondie des processus et solutions mises en œuvre. Suivi des meilleures pratiques en matière de développement logiciel et d'ingénierie des données. Connaissances approfondies du secteur Retail, notamment dans le domaine du marketing des offres promotionnelles. Garantie du volume, de l'éthique et de la sécurité des modèles de données grâce à une documentation appropriée.

MERCI DE POSTULER UNIQUEMENT SI VOUS MAITRISER L'UN DES MOTEURS DE RECHERCHES SUIVANTS: Elastic Search ou search engine Solr et/ou Lucene. Bonjour, Nous recherchons pour l'un de nos clients grand compte un Developpeur Sr Java maitrisant Elastic Search ou search engine Solr et/ou Lucene. Vos missions seront les suivantes: Ø Développer des composants, services et fonctions de notre moteur de recherche juridique et de recherche conversationnel basé sur l’intelligence artificiel (Generative AI). Ø Participer aux réunions SCRUM (daily, review…) et collaborer activement avec l’équipe au sein des sprints de 2 semaines (Scrum) Ø Participer activement avec les autres développeurs et le Techlead à la conception, l’évaluation des charges de réalisation du back-office du produit. Ø Réaliser des développements selon une stratégie de déploiement sur le CLOUD Ø Réaliser des développements dans les règles de l’art : o Participer aux réunions des équipes de développement et s’assurer que le code réalisé (backend et de l’implémentation des flux de données) est en phase avec les bonnes pratiques et les consignes en termes de choix de composants. o Faire du mentorat et promouvoir les bonnes pratiques de développement backend en partageant le savoir avec les autres développeurs de l’équipe. o S’intéresser aux contraintes d’intégration amont et aval des composants implémentés afin de réaliser un interfaçage en étroite relation avec les autres développeurs Lieu: Paris centre Dates de mission: ASAP pour 3 mois renouvelable sur du long terme Tarif: 500-650€ ht selon experiences Pas de sous traitance merci ! Nicholson

En tant que Data Engineer, vous travaillerez en direct avec le Team Lead, les business analystes et le PO. Vous aurez à cœur de comprendre le business model. Les projets à adresser visent le développement et maintenance de modules de gestion des données de consommation (intégration, transformation et exposition), de contrats, et leur représentation à travers différentes interfaces. Vous interviendrez aussi bien sur de l'analyse de besoin, design, développement, support, maintenance corrective et évolutive. Vous travaillerez dans une équipe auto-organisée en mode agile avec un Product Owner et 3 BA (Business analystes). Les activités de cette équipe couvrent l'analyse, le développement, les tests, le déploiement et le support. Vos activités principales seront : · La montée en compétence sur les process, produits et applications existantes · La compréhension du business et la réalisation de développements en pair avec un responsable fonctionnel · L’analyse et spécifications des besoins et algorithmes · Implémenter les corrections et évolutions en couvrant tous les aspect conception, codage, sécurité, gestion des erreurs, évolutivité, scalabilité, revues de code, testing, intégration continue, ...- · Fournir des services aux utilisateurs avec le plus haut niveau de satisfaction. · Fournir des estimations de charge et délais · Soutenir l'amélioration continue des services. Identifier les goulots d'étranglement et les bugs et définir des solutions à ces problèmes · Rédiger et mettre à jour les documentations · Proposer des solutions innovantes répondant aux problématiques fonctionnelles et techniques. · Travailler en étroite collaboration avec les BA, les utilisateurs, architectes et autres équipes de développement. · Fournir une communication efficace et opportune aux différentes équipes concernées

Bonjour, je recherche pour un de mes clients un ARCHITECTE KAFKA Dans le cadre de la création de l’équipe streaming basé sur la technologie KAFKA Confluent Cloud, En tant qu'Architecte Kafka sur Confluent, vous serez responsable de la conception et de l'implémentation des architectures de streaming de données à grande échelle en utilisant Apache Kafka et la plateforme Confluent. Vous travaillerez étroitement avec les équipes de développement et d'opérations pour assurer la scalabilité, la sécurité et l'efficacité des solutions de données. Responsabilités principales Concevoir des architectures de données résilientes et évolutives en utilisant Apache Kafka et Confluent. Collaborer avec les équipes IT et business pour définir les exigences techniques et les objectifs de performance. Élaborer des stratégies de déploiement de Kafka, incluant la configuration des clusters, le choix des machines, et la définition des paramètres de performance. Assurer l'intégration de Kafka avec diverses sources de données et plateformes de traitement en aval. Diriger les évaluations de sécurité et les audits de conformité pour les infrastructures Kafka. Fournir un soutien technique et une expertise lors de la résolution de problèmes complexes. Développer et maintenir la documentation technique, y compris les architectures de référence et les meilleures pratiques. Mentorat et formation des développeurs et des autres architectes dans l'utilisation optimale de Kafka et Confluent. Compétences et qualifications Expérience approfondie avec Apache Kafka et la plateforme Confluent. Expérience démontrée en architecture de solutions de données à grande échelle. Maîtrise des langages de programmation tels que Java, Scala ou Python. Connaissance approfondie des pratiques de sécurité des données et des architectures microservices. Excellentes compétences en communication, en présentation et en leadership. Expérience attendue Expérience dans le développement opérationnel de flux sous KAFKA Expérience significative sur la plateforme Confluent Expérience significative dans un environnement Agile/ Hybrid Expérience de management d’équipes de développeurs et de suivi du delivery Test unitaire/Compliance /Performance Documentation & procédures afin de facilité au support le Monitoring technico fonctionnel des interfaces/Jobs Expérience SAP (ECC & S4/HANA) serait apprécié Coordination avec l’équipe de DEV afin de délivrer un support N3. Outils : KAFKA toolset Programmation et scripting (Java, PL/SQL, SQL, Unix, etc) Job Scheduling / Ordonnanceur (OpCon) Database (SQL Server) Gestion de la demande et service incident (JIRA / SNOW)

Êtes-vous passionné.e par le développement d'applications web robustes en Java, avec une expertise particulière dans le Framework Struts ? Nous recherchons un.e expérimenté.e qui souhaite relever de nouveaux défis et garantir l'excellence technique de nos produits. Rejoignez-nous et jouez un rôle clé dans la création d'applications web innovantes et fiables, en utilisant votre expertise en Java et Struts. 🔥 Vos responsabilités : Développement sous Java : Prendre en charge une partie des développements en respectant les règles et méthodes définies, avec une expertise avancée en Java. | Analyse et Évolution : Analyser, corriger et/ou faire évoluer les applications informatiques pour répondre aux besoins changeants du projet. Participation aux Tests : Participer activement aux différentes phases de tests, en garantissant une couverture exhaustive des fonctionnalités et en rédigeant la documentation projet associée. Collaboration en Équipe : Travailler efficacement au sein d'une équipe multidisciplinaire, en assurant une cohérence parfaite avec les objectifs du projet et en respectant les normes d'assurance qualité ISO 9001.

Notre client du domaine de l'Assurance recherche un profil Ingénieur Développement Spark Scala Expérimenté (+10 ans d'expérience). Sur une architecture Big Data permettant de collecter les données de l’ensemble des Back Office dans un Datalake (cluster Hadoop), le projet consiste à exploiter ces données pour alimenter un Dataware communautaire stockée sur une base Exadata. Cette exploitation est réalisée par la conception de nouveaux traitements Spark/Scala manipulant les données raffinées du DataLake avec des règles métiers décisionnelles.

Contexte de la mission Le prestataire s'engage à effectuer les missions décrites dans les "Objectifs et livrables" sur les environnements d’homologation et/ou de production. Ces missions se dérouleront principalement dans le cadre de maintien en conditions opérationnelles et se feront dans le respect : De la documentation et les modes opératoires définis et industriels, Des processus opérationnels ITIL (gestion des incidents, des problèmes, des changements), Des outils et workflows mis en place par la gestion des processus. Objectifs et livrables Les missions que pourront effectuer le prestataire sont les suivantes : Sur les environnements de préproduction : Contribution à la stratégie des tests, traçabilité de ces derniers au sein des outils de support de la qualification Dans le cadre de la préparation de la Mise en Production (MEP) et/ou de Mise en Service (MES) à venir : Contribution au plan de MEP/MES, Répétition des gestes de MEP/MES en respectant les modes opératoires prévus et le cadencement duplan de MEP/MES Rédaction des tâches de changements Exploitabilité de la solution et Validation d'Aptitude au Bon Fonctionnement (VABF) : Procédures standards : Arrêt / Marche des composants, fourniture des logs, etc... Continuité / Disponibilité des composants applicatifs définissant le service concerné Supervision de la plate-forme et des composants applicatifs Stratégie de Sauvegarde et de Restauration Journalisation / Archivage / RGPD Concernant ces derniers points, ils constituent un Document Technique d'Exploitation (DTE) et des consignes opérationnelles qui seront maintenus à jour et communiqués au service ou plus largement au sein de la Direction des Opérations. Sur l'environnement de production : Réalisation de la MEP/MES et support à la Validation de Service Régulier (VSR) des projets Assurer le Maintien en Conditions Opérationnelles (MCO) dans un contexte des engagements de services définis avec les directions métiers : Gestion des incidents de production remontés par le service client, les directions métiers, nos filiales et les clients pro, le domaine Loterie ou la Direction des Opérations, Analyse et escalade en anomalie, voir problème lorsque nécessaire, Suivi des incidents pris en charge et anomalies créées Assurer de traitement de Demandes de Travaux (DMT) spécifiques

Espace-Freelance, réseau de consultants indépendants, recherche pour l’un de ses clients directs : un Data Engineer Expérimenté (H/F) – Paris Mission à pourvoir en régie sur Paris Présence sur site : 3 jours / semaine Compétences obligatoires : Python ; AWS ; PySpark ; Airflow ; Github ; anglais courant Votre mission : - Apporter une expertise sur la constitution des datasets et KPIs - Accompagner l’équipe sur les meilleurs choix techniques - Assurer la qualité des traitements et des données - Comprendre un modèle de données et s’en servir - Maitriser et contrôler la qualité de code - Mettre en place des indicateurs de mesure de qualité sur chaque développement REF : EFP/GMCPP/ODVB Plus d’offres sur :

Dans le cadre de cette prestation, les différentes activités à réaliser à chaque Incrément ou Release sont les suivantes : T1 : Élaborer l’architecture logiciel pour le projet et préparer les dossiers de conception et de justification T2 : Coordonner la conception au sein de l’équipe logiciel T3 : Piloter les développements et vérifier leur cohérence avec les principes d’architecture T4 : Garantir le respect des standards du domaine, de la politique de re-use T5 : S’assurer de la consistance et cohérence système et logiciel en liaison avec l’architecte système T6 : Garantir la testabilité de l’architecture. Participer à l’élaboration des plans de test et aux actions correctives nécessaires lors de leur exécution

Développeur spark /scala dans le secteur de l'assurance ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;; ;;;;;; ;;;;; ;;;;; ;;;;;; ;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;; ;;;;;; ;;;;; ;;;;; ;;;;;; ;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;; ;;;;;; ;;;;; ;;;;; ;;;;;; ;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;; ;;;;;; ;;;;; ;;;;; ;;;;;; ;;;;;;