Dans un contexte Data & BI à forts enjeux, vous intervenez au sein d’une équipe Big Data & API, rattachée à une squad Financing & Risk, en charge du développement et de l’exploitation d’un datalake utilisé comme plateforme data centrale par les équipes IT et métiers.

En tant que Data Engineer, vous jouez un rôle clé dans la gestion, l’évolution et la fiabilité de cette plateforme.

Vos principales missions sont les suivantes :

Assurer la gestion de la production du datalake (suivi, incidents, stabilité des traitements)
Prendre en charge la dette technique et contribuer à l’amélioration continue de la plateforme
Analyser l’architecture existante et proposer des évolutions techniques pertinentes
Réaliser les développements Big Data liés aux projets en cours et à venir
Participer à l’industrialisation et aux déploiements via les chaînes CI/CD

Vous évoluez dans un environnement technique Big Data on-premise, au sein d’une équipe travaillant en interaction avec des équipes IT et métiers, sur des sujets à forte valeur ajoutée.

Candidate profile

Compétences

Expérience confirmée en Data Engineering / Big Data
Maîtrise de Spark et PySpark
Bon niveau en Scala
Solide expérience sur Hadoop on-premise
Utilisation de Hive et SQL / HQL
Pratique des environnements Unix/Linux et du Bash
Expérience des outils CI/CD (Jenkins, pipelines)
Connaissance de XLDeploy / XLRelease
Utilisation d’outils de suivi projet type Jira
Capacité à travailler sur de la production critique et à traiter de la dette technique

Discover CAT-AMANIA

Saint-Herblain, Pays de la Loire

> 1000 employees

IT services

Créée en 1999, CAT-AMANIA fait partie des ESN dynamiques et innovantes qui s’appuie sur ses expertises métiers, techniques et méthodologiques pour accompagner ses clients dans leur transformation digitale. Aujourd’hui CAT-AMANIA c’est : 71 millions d’€ de chiffre d’affaires, 950 collaborateurs répartis sur 18 agences en France et à l’international. Construire ensemble pour mieux grandir Portée par ses valeurs de Joie, de Confiance, d’Audace, de Persévérance et de Respect, notre entreprise souhaite les partager avec vous dans la réussite de projets communs. Cat-Amania s'engage à assurer la diversité de ses équipes et à créer un environnement de travail inclusif. Nous accueillons toutes les candidatures sans distinction d'âge, de genre, d'origine, d'orientation sexuelle, de croyance religieuse ou de handicap.

Apply to this job!

Find your next career move from +700 jobs!

Manage your visibility

Salary, remote work... Define all the criteria that are important to you.
Get discovered

Recruiters come directly to look for their future hires in our CV library.
Join a community

Connect with like-minded tech and IT professionals on a daily basis through our forum.

Data Engineer Big Data – Datalake Hadoop / Spark (on-premise)

CAT-AMANIA