Share this job
Vous serez en charge d'assurer l'exploitation quotidienne des environnements hors production.
Vos missions consisteront à contribuer:
Assurer le Refresh des données sur les différents environnements
Assurer les installations applicatives (traitements Spark/Scala, ETLs Informatica, scripts sql Oracle, scripts shell, ...)
Synchronisation des environnements : versions applicatives, versions software, configurations et paramétrages
Monitoring et observabilité : Construire et maintenir un dashboard de monitoring des environnements (exécutions, volumes, ..)
Automatisation des procédures : Développer les outils/scripts nécessaires permettant de réduire l'effort manuel (contrôle automatique des écarts entre environnements, validation post-installation et refresh, conhérence des bdd ..)
Maintien en conditions opérationnelles : Exécution des jobs Spark, analyse des logs, contrôle des dépendances, suivi des batchs Opcon, relances des batch/jobs.
Candidate profile
Pour mener à bien ce projet, vous devrez justifier de:
Compétences techniques: Apache Hadoop, Google Cloud (GCP), SCALA, shell Linux, Elasticsearch, Logstash, Kibana (elk), GIT, Spark,
Compétences en développement PL/SQL Oracle et MongoDB
Compétences en matière de formalisation de la Documentation, automatisation des déploiement, respecter les standards d'exploitation
Compétences en Investigation dans l'analyse des erreurs et métriques (software et hardware), comprendre la chaine Data et surveiller la pipeline de bout en bout.
Capacité à travailler au sein d'une équipe multi disciplinaire: Service Ops, équipe Développement Data, l'équipe de Production,
Bonne communication orale et écrite.
Working environment
Apply to this job!
Find your next career move from +10,000 jobs!
Manage your visibility
Salary, remote work... Define all the criteria that are important to you.
Get discovered
Recruiters come directly to look for their future hires in our CV library.
Join a community
Connect with like-minded tech and IT professionals on a daily basis through our forum.
Ingénieur Data Ops (Hadoop/SCALA/ Spark)
CAT-AMANIA
