Mission freelance Administrateur technique Data / DevOps H/F
Fontenay-sous-Bois (94)
Cheops Technology
Partager cette offre
Dans le cadre d’un projet Data pour le client au sein du marché NTIC et de la DTNum – Data, le consultant interviendra sur la plateforme sécurisée des données.
Il sera responsable de l’administration technique et du maintien en conditions opérationnelles des outils de cartographie des données, ainsi que de l’alimentation et de l’enrichissement des cartographies fonctionnelles et techniques.
La mission s’inscrit dans un environnement intégrant notamment le dictionnaire de données OpenMetadata, le catalogue métier Istya et les produits de la plateforme sécurisée des données : Datalake, requêteur sécurisé Odylac et écosystème de datavisualisation.
L’objectif est de garantir la fiabilité, la sécurité, la documentation et l’exploitabilité des solutions, en vue de leur transfert vers un centre d’exploitation dédié.
2. Missions principalesAdministration technique et exploitation (OPS)
Maintenir et déployer les configurations d’infrastructure et des outils à l’aide de Terraform et Ansible.
Assurer le maintien en conditions opérationnelles des instances Apache NiFi et des connecteurs OpenMetadata.
Superviser les pipelines d’ingestion et diagnostiquer les incidents techniques.
Mettre en œuvre les actions correctives nécessaires et fiabiliser les traitements.
Rédiger et maintenir la documentation technique et les fiches d’exploitation.
Alimentation et enrichissement du catalogue de données
Développer et maintenir les flux Apache NiFi d’ingestion des métadonnées techniques et fonctionnelles vers OpenMetadata et Istya.
Mettre en œuvre les contrôles qualité, les transformations et les mécanismes de validation des données entrantes.
Garantir la cohérence, la fiabilité et la traçabilité des métadonnées collectées.
Connectivité des produits Data
Améliorer l’interconnexion entre le Datalake existant et OpenMetadata.
Mettre en œuvre l’extraction des schémas et le profilage des données.
Étendre la couverture de la cartographie automatique aux autres services Data de la plateforme sécurisée.
Contribuer à l’amélioration continue des outils de catalogage et de gouvernance des données
Profil recherché
Consultant technique Data / DevOps disposant d’une expérience confirmée en automatisation d’infrastructure, exploitation de plateformes Data et intégration de métadonnées.
Le candidat devra être capable d’intervenir aussi bien sur les aspects opérationnels (MCO, supervision, incidents) que sur le développement de flux d’ingestion et l’amélioration de la connectivité des outils de catalogage.
Une expérience dans des environnements Data sécurisés et des projets de gouvernance des données constituera un atout.
Environnement de travail
Compétences techniques requises
Compétences indispensables
Terraform : maîtrise de l’Infrastructure as Code (IaC).
Apache NiFi : conception et maintenance de flux, gestion des processeurs et traitement des erreurs.
Python : développement de scripts de parsing, de transformation et d’automatisation.
Ansible : automatisation et gestion de configuration.
Bash et SQL : scripting, manipulation et contrôle des données.
Compétences importantes
Environnements Big Data : Hadoop, Spark, Hive.
Stockage objet : MinIO et/ou S3.
Technologies de requêtage et d’accès aux données : Trino ou équivalent.
Catalogues de données et métadonnées : OpenMetadata ou solution équivalente.
Concepts de data lineage, dictionnaire de données et cartographie fonctionnelle et technique.
4. Compétences fonctionnelles
Sensibilité aux enjeux de gouvernance, de qualité et de sécurité des données.
Compréhension des architectures Data et des problématiques d’exploitation.
Capacité à analyser et à résoudre des incidents techniques.
Aptitude à rendre accessibles des sujets techniques complexes aux interlocuteurs métiers.
Environnement technique
Terraform, Ansible, Apache NiFi, Python, Bash, SQL, OpenMetadata, Istya, Datalake, Hadoop, Spark, Hive, MinIO/S3, Trino.
Mots-clés : Administrateur Data, DataOps, DevOps, Terraform, Apache NiFi, OpenMetadata, Data Catalog, Data Lineage, Hadoop, MinIO, Python, MCO.
Postulez à cette offre !
Trouvez votre prochaine mission parmi +10 000 offres !
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
100% gratuit
Aucune commission prélevée sur votre mission freelance.
Administrateur technique Data / DevOps H/F
Cheops Technology