Trouvez votre prochaine offre d’emploi ou de mission freelance Apache

Contexte : migration de On premise vers GCP En tant que Data Engineer, vous serez au cœur de notre stratégie data. Vous concevrez et mettrez en œuvre des solutions innovantes pour collecter, transformer et stocker nos données massives. Votre expertise technique sera essentielle pour les projets et offrir des insights précieux à nos équipes métiers. Vos missions : Conception et développement: Définir et mettre en œuvre des architectures de données robustes (data lakes, data warehouses). Concevoir et développer des pipelines de données automatisés (ETL). Optimiser les performances des traitements de données. Technologies: Maîtrise des langages de programmation : Python, Scala, SQL. Expérience avec les outils de traitement de données : Spark, Hadoop, Kafka. Connaissance des bases de données relationnelles et NoSQL. Expérience avec les clouds (GCP) Collaboration: Travailler en étroite collaboration avec les équipes métiers. Participer à la définition de la roadmap data.

Contexte : La mission se déroulera en collaboration avec les autres équipes de la Data, au cœur de la plateforme Data. Cette équipe est composée d’un product owner, d’un data steward et de deux autres data ingénieurs. Notre stack technique est principalement constituée de Python, Spark, SQL pour les traitements de données, Airflow pour l’orchestration et Cloud Storage et Delta lake pour le stockage. La stack inclut aussi les services BigQuery, Dataproc, PubSub et Cloud Storage de la Google Cloud Platform et Terraform et Terragrunt pour la gestion de l’infrastructure. MISSIONS : 1. Collecter et centraliser les différentes sources de données non homogènes 2. Assurer la conformité et la sécurité des données 3. Participer aux initiatives de gouvernance des données En interaction avec les membres de l’équipe, la prestation consiste à : • Participer activement aux différentes phases de conception, de planification et de réalisation des tâches avec l’équipe • Construire et maintenir de pipelines data robustes et scalables • Accompagner les membres de l’équipe dans l’exploitation et le requêtage des données • Organiser et structurer le stockage des données • Mettre en place et maintenir des infrastructures scalables capable de répondre aux besoins et à l’accroissement rapide du volume de données • Construire et maintenir les workflows de la CI/CD • Partager avec les autres data ingénieurs pour appliquer les bonnes pratiques en vigueur • Assurer l’évolutivité, la sécurité, la stabilité des environnements • Participer aux différentes instances des data ingénieurs • Contribuer et veiller à la mise à jour de la documentation • Faire de la veille technologique active dans le domaine Profil & Expertises demandées : • Au moins 3 ans d’expérience en tant que Data Ingénieur dans un environnement data • Compétences solides en data : structures de données, code, architecture • Expériences dans la conception et la réalisation de pipelines data • Expériences dans un environnement du cloud Google (GCP) • Expériences intégrant BigQuery et Dataplex Universal Catalog • Expériences intégrant les langages Python et SQL • Expériences intégrant Spark • Expériences intégrant delta lake • Expériences intégrant Terraform et Terragrunt • Expériences intégrant Gitlab et Gitlab CI/CD • Expériences intégrant les méthodologies Agile : Scrum ou Kanban • Capacité à vulgariser et à communiquer sur des aspects purement techniques Niveau d’expertise attendu : Sénior : plus de 5 ans d’expérience significative dans le type d’expertise demandé dans le type d’expertise demandé

Bonjour à tous 😀 🚀 Contexte de mission Nous recherchons un Data ingénieur - Référent technique Nifi et Data , vous intervenez au sein d’une équipe Data & IA sur des environnements critiques à forte volumétrie. L’objectif : concevoir, optimiser et sécuriser les flux de données dans un contexte de production exigeant, avec des enjeux forts de continuité de service . 🎯 Vos missions Développer et maintenir des pipelines de données (Apache NIFI / Databricks) Optimiser les flux existants (performance, fiabilité, scalabilité) Assurer le RUN et le support (HNO / 24-7) Mettre en place et améliorer les processus CI/CD Superviser les traitements (monitoring, alerting) Participer aux études techniques et POC Produire la documentation et les reportings d’incidents Être force de proposition sur l’ amélioration de l’architecture data ✅ Must Have Expertise Apache NIFI Très bonne maîtrise de Databricks Expérience solide sur Azure Bon niveau en Python & Spark Expérience en environnement de production critique (RUN / incidents) Connaissance CI/CD (Git / GitLab) Expérience en monitoring (type DataDog) Bonne maîtrise des bases de données (PostgreSQL) Expérience en Agile / Scrum ➕ Nice to Have Connaissance AKS (Kubernetes) Expérience avec Zookeeper Background sur des projets data à forte volumétrie Culture DevOps / automatisation avancée

Nous recherchons pour un de nos clients un Tech Lead Frontend REACT / Développeur confirmé. Contexte : - Tech Lead Frontend REACT / Développeur confirmé - +5 ans d’XP - LOCALISATION FLEXIBLE sur moitié Nord France : Rouen, Paris, Orléans, Tours, Niort… Descriptif : Pour un projet de Build conséquent pour un client Assurance, nous recherchons un Tech Lead Frontend REACT pour accompagner une équipe de ~10 Dév pour le dév de parcours en Agile. Taches de Tech Lead et Dév sur sujets complexes. Stack et architecture attractive : REACT sur Openshift, .NET API – MVC, KAFKA, SQL Server, Apigee

Contexte / Objectifs : 1. Développement de Pipelines de Données : o Concevoir, développer et optimiser des jobs Spark (Java) pour le traitement, la transformation et l'agrégation de grands volumes de données provenant de diverses sources. o Implémenter des flux de données robustes et performants sur Cloudera. o Utiliser HBase pour des besoins de stockages NoSQL rapides et l'accès à des données structurées/semi-structurées. o Développer des requêtes SQL complexes sur HIVE/SPARK pour l'extraction, l'analyse et la validation des données. 2. Optimisation et Performance : o Monitorer la performance des jobs Spark et identifier les goulots d'étranglement. o Optimiser les requêtes SQL et les stratégies de lecture/écriture sur HDFS et HBase. o Proposer et implémenter des solutions pour améliorer la scalabilité et l'efficacité de la plateforme. 3. Assurance Qualité et Déploiement (DevOps) : o Écrire des tests unitaires et d'intégration pour garantir la qualité du code. o Participer aux processus de Build et de déploiement via les outils CI/CD (Jenkins, XLD). o Intégrer des outils d'analyse de code statique (SonarQube, Checkmarx) dans le cycle de développement. o Gérer les dépendances et les versions avec Maven. 4. Collaboration et Documentation : o Documenter le code, les architectures et les processus. o Partager les bonnes pratiques et contribuer à l'amélioration continue de l'équipe.

Missions : -Réceptionner, installer les livrables et configurer les applications (en environnement UNIX/Linux) en suivant les documentations -Effectuer les tests de recette applicative -Analyser les dossiers d’architecture solution et technique. -Apporter une expertise fonctionnelle et technique sur les patrimoines gérés -Suivre les phases de recette et participer à l’analyse des anomalies détectées dans ces phases avales et en production (pré-production, récupération jeux de données) avant de les retransmettre au prestataire en charge du développement -Rédaction de cahier des charges pour les tests de performances, de recueil des actions pour préparer les mises en production. -Tenir à jour la documentation du patrimoine applicatif.

Au sein d'une équipe Agile Scrum, vous participez à l'évolution et à la maintenance d'applications stratégiques dans un environnement complexe à forte volumétrie. Vous intervenez sur des sujets liés à la gestion de données, aux services d'échange et à la modernisation du système d'information. Missions principales Concevoir, développer et maintenir des applications backend en Java et Spring Boot. Participer à l'analyse technique, à la conception et à l'implémentation des nouvelles fonctionnalités. Développer et maintenir des API REST ainsi que des interfaces avec des systèmes existants. Contribuer à l'amélioration continue de la qualité logicielle via les bonnes pratiques de développement, la refactorisation et les tests automatisés. Participer aux cérémonies Agile (Sprint Planning, Daily, Review, Rétrospective). Collaborer avec les équipes DevOps afin d'assurer l'intégration et le déploiement continus des applications. Préparer et accompagner les mises en production. Assurer le support technique et la résolution des incidents en production. Maintenir la documentation technique et les référentiels de connaissance. Environnement technique Développement Java 17/21 Spring Boot Architecture REST Microservices Architecture hexagonale Kafka Batch Java Données Bases de données relationnelles MySQL DB2 DevOps & Industrialisation Git / Git Flow GitLab CI/CD Kubernetes ArgoCD SonarQube JFrog Xray Outils de gestion des releases Sécurité OAuth2 OWASP Top 10 Security & Privacy by Design Outils IntelliJ IDEA / Eclipse MySQL Workbench

Description : Le service intervient en aval de l’intégration applicative, dans un objectif de sécuriser les mises en production et garantir le contrat de service, par la vérification des exigences non fonctionnelles. L’objectif du dispositif est d’opérer le contrôle qualité pour s’assurer que les éléments fabriqués seront en mesure d’assurer la capacité, la disponibilité, la sécurité et la continuité des services en production. Le besoin porte sur le renforcement de l’équipe OPS avec une prestation d’assistance technique des campagnes de tests d’exploitabilité. Mission : Intégration d’exploitabilité est autonome sur ses campagnes. Il remonte auprès du responsable les alertes du projet. Il est le garant des résultats et de son analyse auprès des projets demandeur et de son responsable Taches : Réaliser des campagnes de tests d’exploitabilité, Intégrer des composants informatiques (dans un contexte hétéroclite) Dérouler un plan de test opérationnel sur nos critères en exigence non fonctionnels afin de déterminer les éventuels problèmes d’exploitabilité avant la mise en production Exécuter les procédures définies et amélioration de ces dernières Analyser les résultats et proposer des améliorations. Compétences professionnelles : - Expérience souhaitée sur l’automatisation de tests et d’un outil de supervision (type CENTREON ou Zabbix) - Notions souhaitées : TCP/IP, répartiteur de charge (type F5 BigIP), Sécurité du chiffrement des échanges (certificat, autorité de certification) Rédaction et expression écrite et orale (Rédaction de documentation et relation avec les Fabricants), - Savoir être : - Travailler en équipe (ressources multi-sites) Excellente aisance relationnelle Avoir un esprit d’initiative. Bonne qualité rédactionnelle Maitrise des technologies suivantes dans le cadre du poste : - Environnement système Unix, Linux Red Hat, Script Shell Weblogic TomCat Apache Oracle PostGreSQL Conteneurisation des applications

Dans le cadre de l'évolution d'un système d'information stratégique du secteur financier et assurantiel, nous recherchons un Développeur Java Back-End Confirmé/Senior pour intégrer une équipe Agile organisée à l'échelle SAFe. Vous participerez au développement et à l'évolution d'applications critiques à forte composante Data, au sein d'un environnement technique moderne orienté qualité, automatisation et DevSecOps. En tant que contributeur technique majeur de l'équipe, vous interviendrez sur l'ensemble du cycle de vie des applications, de la conception à l'exploitation en production. Vos missions Concevoir, développer, tester et maintenir des applications Java robustes et performantes. Participer aux choix d'architecture et à la conception technique des solutions. Garantir la qualité, la maintenabilité et la sécurité du code produit. Mettre en œuvre et enrichir les stratégies de tests automatisés (unitaires, intégration, end-to-end). Participer à l'amélioration continue des pipelines CI/CD et des pratiques DevSecOps. Contribuer au traitement des incidents de production et à l'amélioration de la résilience des applications. Participer aux cérémonies Agile Scrum et SAFe. Accompagner les développeurs plus juniors à travers les revues de code et le partage de bonnes pratiques. Assurer une veille technologique active et proposer des améliorations techniques. Exploiter les outils d'IA générative pour optimiser la qualité et la productivité du développement.

La mission consiste à : - Mise à jour de l’architecture et travaux de conception - Rédaction des documentations techniques, étude des US - Développement de nouvelles fonctionnalités/features/APIs - Analyse et amélioration des performances du SI - Revue de code et accompagnement des membres de l’équipe - Missions basées en métropole lilloise avec présence sur site obligatoire 3j/semaine Compétences demandées : - Min. 3 ans d’expérience en développement (hors stage et alternance) - HTML, CSS, Javascript, Node JS, Vue JS, API, Kafka, BDD relationnelles et non relationnelles... - Intégration continue - Culture Devops, connaissances Docker et Kubernetes - Environnement GCP - Maîtrise et pratique de l’Agile - Anglais un +

Au sein de l’équipe, votre mission sera la suivante : • animer l’équipe selon les principes et les valeurs de l’Agilité : animer les daily, garantir le respect des priorités, informer/alerter le chef de projet • concevoir techniquement les évolutions en collaboration avec le LeadDEV de l’équipe et l’architecte du domaine • développer les évolutions et en assurer la couverture en tests unitaires et fonctionnels en lien avec le Product Owner et le Testeur QA * Contribuer aux opérations de maintien en conditions opérationnelles * Participer au suivi de la Production (alerting, logs) Livrables Code Source Documentation Technique Compétences Maîtrise des architectures SOA Attacher une importance à la robustesse et la qualité du code Être habitué à la démarche devOps Être force de proposition Être autonome tout en sachant prendre en compte les compétences de l'équipe En recherche d'amélioration continue

Analyser les besoins métiers et techniques avec les équipes projet. Développer et maintenir des applications Front-End et Back-End. Concevoir et développer des API REST. Réaliser les tests unitaires et participer aux recettes. Rédiger la documentation technique. Participer aux cérémonies Agile et aux mises en production. Assurer la maintenance corrective et évolutive des applications. Compétences requises Obligatoires: Angular Python FastAPI / API REST Java Git OpenShift XL Deploy (XLD) / XL Release (XLR) Appréciées: NoSQL Hadoop Solr

Exploitation et maintien en condition opérationnelle des plateformes Middleware Gestion des incidents, demandes de service et problèmes ; Contribution aux évolutions techniques des infrastructures Middleware ; Participation aux mises en production applicatives ; Automatisation et industrialisation des services Middleware via les chaînes CI/CD (AWX, Ansible, Vault, GitLab, etc.) ; Contribution à la mise au catalogue des offres de services Middleware Les livrables sont: Maintien en condition opérationnelle des composants Middleware Expertise (Audit / accompagnement / tunning) DevOps - Automatisation Apache HTTP/Tomcat/TomEE — RHEL/CentOS/Windows - Expert IBM WebSphere Application Server — Linux / AIX - Confirmé JBoss EAP 6 / 7 — Linux - Expert NGINX 1.x — Linux - Confirmé

Almatek recherche pour l'un de ses clients, un Intégrateur Applicatif / Exploitation ERP Cegid XRP Ultimate (Qualiac) sur Niort Description détaillée CONTEXTE: Dans le cadre de l’évolution de son système d’information, le client a identifié le besoin de s’adjoindre l’expertise d’une société de prestation de services disposant de compétences avérées en matière d'intégration de solutions logicielles, notamment de son ERP Cegid XRP Ultimate (Qualiac) EXPERTISES ATTENDUES: -Linux, AIX -GitHub, Nexus, Jenkins, CD/RO -Apache/Tomcat -SGBD Oracle, SQL -Shell, Ansible, Rundeck -JIRA -Connaissances réseaux -ERP Cegid XRP Ultimate (Qualiac) PRESTATIONS ATTENDUES: -Participer aux rituels agiles de l'équipe -Assurer l’assemblage dans le respect du plan d’urbanisme des systèmes d’information de l’entreprise et de l’architecture retenue pour les produits du domaine -Assurer la cohérence des flux inter-applications, de l'intégrité des données et de la sécurité de l'ensemble. -Assurer l'intégration, le développement et le paramétrage notamment sur le périmètre technologique Cegid XRP Ultimate (Qualiac) -Prendre part à la résolution des incidents et autres dépannages nécessaires à nos utilisateurs. LIVRABLES: -Système applicatif opérable et documenté Compétences techniques: ERP Cegid XRP Ultimate (Qualiac) - Confirmé - Impératif Linux, AIX - Confirmé - Important GitHub, Nexus, Jenkins, CD/RO- - Confirmé - Important Apache/Tomcat - Confirmé - Important

Dans le cadre d'un vaste programme de transformation digitale et de modernisation du système d'information, notre client industriel souhaite engager un chantier stratégique de transformation de son patrimoine d'interfaces. L'entreprise exploite aujourd'hui plusieurs centaines de flux applicatifs historiques reposant notamment sur une plateforme middleware legacy dont la pérennité n'est plus assurée. L'objectif n'est pas de réaliser une migration technique à l'identique mais de définir une véritable stratégie de transformation des échanges applicatifs afin de moderniser durablement l'architecture d'intégration. Le consultant interviendra au sein de l'équipe Architecture et travaillera en étroite collaboration avec les architectes d'entreprise, architectes middleware, responsables applicatifs, équipes métiers et partenaires techniques dans un contexte international. La mission comporte également une dimension capacitaire avec une participation à certaines études d'architecture d'intégration liées aux projets applicatifs de la roadmap SI. Transformation du patrimoine d'interfaces Réaliser l'analyse et la caractérisation du patrimoine de flux existant. Identifier les applications sources et cibles ainsi que les dépendances associées. Évaluer la criticité, les contraintes techniques et les enjeux métiers de chaque interface. Analyser les modes d'échanges existants et leur pertinence dans l'architecture cible. Construire une stratégie de transformation flux par flux. Définir les scénarios de modernisation les plus adaptés : migration vers une plateforme d'intégration cible ; exposition sous forme d'API ; mise en œuvre de mécanismes événementiels ; transfert de fichiers managés ; rationalisation ou suppression de flux. Construction de la roadmap de transformation Élaborer un schéma directeur de transformation. Prioriser les chantiers. Définir les trajectoires de migration. Produire les estimations de charges, de planning et de budget. Identifier les risques et les dépendances. Participer à la définition de la gouvernance du programme. Accompagnement des projets applicatifs Contribuer aux études d'architecture d'intégration. Participer aux ateliers de cadrage. Définir les architectures d'échanges entre applications. Produire les dossiers d'architecture et les spécifications fonctionnelles. Accompagner les équipes projets sur les problématiques d'intégration. Environnement technique: Middleware & Intégration MuleSoft ESB API Management API REST / SOAP EDI ETL / ELT Web Services Data & Messaging Kafka Talend AWS Transfer Family Architecture Architecture d'intégration Cartographie des flux Urbanisation SI Modélisation de données Architecture applicative Méthodologies Agile / Scrum Cycle en V ITIL Gestion de projet

Vous serez responsable de la conception et de la mise en œuvre d'architectures optimisées et scalables au sein d'une plateforme data, analytique et IA basée hébergée en hybride Cloud/On Premises. Ce poste nécessite une compréhension approfondie de l’écosystème Data en terme de technologies et de pratiques à l’état de l’art (i.e. Hybridation, Datamesh etc…) Les principales activités sont les suivantes : - Collaborer avec les équipes data (Data Engineer, Data Analyst, Data Scientist, Business Analyst, Product Owner, Chef de projet, etc.) pour comprendre les exigences en matière de données, d'usages et de capacités et concevoir et formaliser l’architecture adaptée - Accompagner les équipes data dans la mise en œuvre des architectures définies - Assurer la qualité, l'intégrité et la sécurité des données dans l'environnement de la plateforme data, analytique et IA - Optimiser les processus d'ingestion de données et contribuer à la définition et la mise en œuvre des politiques de gouvernance des données - Évaluer et préconiser les technologies et outils appropriés pour le stockage, le traitement et l'analyse des données - Proposer des optimisations pour résoudre les problèmes d’architecture liés au stockage, à l’accès et à l’exploitation de la plateforme data - Une expérience sur l’accompagnement de projet en lien avec des migrations de plateforme data On premises vers le Cloud (idéalement GCP). Compétences techniques ou métier recherchées : - Vous avez une expérience minimale de 6 ans sur un poste d'architecte data et vous avez une expérience de mise en œuvre d'une plateforme basée sur une technologie Cloud. - Vous avez obtenu un diplôme dans le domaine IT et êtes spécialisé dans la Data. - Vous avez une expérience similaire sur la modélisation des données. - Concepts et technologies liés au Big Data (par exemple, Apache Spark, Hadoop) et aux bases de données SQL/NoSQL. Compétences comportementales recherchées : - Coopérer et fonctionner en transversal - Interagir facilement avec les autres - Négocier et convaincre - Proposer des initiatives ou des solutions - S'adapter aux changements. Compétence complémentaire : - Maitrise des Plateformes Data GCP, Spark, Python, SQL, Kafka, MongoDB Excellente connaissance des concepts et technologies des datalake, datawarehouse / entrepôts de données, lakehouse, des plateformes cloud telles que Google Cloud.