Trouvez votre prochaine offre d’emploi ou de mission freelance Cloudera

Data Engineer Experimenté chez CATS à Vannes Renfort du Chapitre Data d'un profil Data Engineer Experimenté qui sera amené à intervenir au sein d'une squad du domaine régalien, dans un environnement Cloudera - en utilisant un framework interne entreprise – en lien avec PO/BA de la squad ainsi que l'équipe de Dev., ceci dans un cadre agile sujets : adaptations et réécritures des traitements réglementaires autour des arrêtés comptables, évolution des traitements de supervision, montée de version, documentation technique, 📝 Activités - Affiner les US avec le PO/BA, concevoir puis développer les solutions de collecte et de stockage des données (provenant de multiples sources) afin de le rendre disponibles pour les usages métiers : -- Concevoir et développer des pipelines via ETL interne basé sur spark / Automatiser l'ingestion de données depuis diverses source / Orchestrer les flux de données batch et temps réel - Mettre en œuvre les tests unitaires et automatisés - Déployer le produit dans les différents environnements - Garantir le bon fonctionnement du produit en production et assurer le suivi / l'assistance / la gestion des incidents y compris mise en place et optimisation du monitoring - Accompagner l'évolution des pratiques de l'équipe dans une logique d'amélioration continue de la qualité du code 🏦 Domaine d'activité : Domaine bancaire - équipe régalien (Expérience dans le domaine Bancaire très fortement apprécié) ⚙️ Compétences Techniques : Langage / ETL : Spark - streaming et batch (requis), Semarchy xDI (apprécié) Framework Big Data : Hadoop Cloudera (très fortement apprécié) Sensibilité forte aux enjeux métiers, de préférence avec le milieu bancaire 🧠 Compétences Humaines : Bonne communication / Pédagogue Prise de Lead / Force de proposition, Sait challenger les besoins Autonomie, Adaptabilité 🚀 XP : Experimenté (4 à 7 ans) 🗺️Localisation : Vannes : 3 jours sur le site

Contexte de la mission Dans le cadre d'un programme de transformation digitale d'envergure, vous rejoindrez une équipe agile dédiée au développement d'une plateforme de données temps réel. Cette plateforme permet de centraliser, traiter et valoriser des données clients afin de proposer de nouveaux services digitaux et d'accompagner la modernisation du système d'information. Vous évoluerez au sein d'un environnement collaboratif, orienté qualité de code, amélioration continue et excellence technique. Vos missions Développer et mettre en œuvre de nouvelles fonctionnalités à partir des besoins métiers priorisés Concevoir des solutions techniques robustes et évolutives. Participer aux choix d'architecture et aux orientations techniques de l'équipe. Concevoir et développer des API. Automatiser les tests et promouvoir les bonnes pratiques de développement. Garantir la qualité, la performance et la maintenabilité des applications. Assurer le bon fonctionnement des solutions en production. Accompagner les membres de l'équipe dans une démarche d'amélioration continue. Environnement technique Langages & Frameworks Java Scala Apache Spark (Streaming & Batch) Apache Kafka Data & Big Data Hadoop / Cloudera HDFS Hive HBase Phoenix API & Intégration Développement d'API DevOps & Qualité GitLab CI/CD Jenkins Artifactory SonarQube ELK Grafana XRAY JUnit Automatisation des tests / Craftsmanship Méthodologie Agile Scrum