Mission freelance POT9141 - Un Data Ingénieur DevOps sur AWS sur Plaisir
Plaisir (78)
Almatek
Le poste POT9141 - Un Data Ingénieur DevOps sur AWS sur Plaisir
Partager cette offre
Almatek recherche pour l'un de ses clients Un Data Ingénieur DevOps sur AWS sur Plaisir.
Contexte de la mission
Dans le cadre de la mise en place d’une dataplateforme d’entreprise, la DSI du client souhaite intégrer un expert Data Ingénieur & DevOps AWS afin de :
Mettre en place l’ingestion de différents types de données (structurées, semi?structurées, non structurées)
Industrialiser l’ingestion des données depuis un datalake existant vers la nouvelle dataplateforme
Automatiser l’intégration des données dans la couche standardisée AWS (RAW DATA vers STANDARDIZED)
Réaliser la documentation et assurer le transfert de connaissances
L’objectif principal est de finaliser un premier use case incluant l’ingestion de plus de 100 tables issues d’un ERP, tout en accompagnant la montée en compétences des équipes internes (équipe data et Data Engineer).
Environnement Technique
Data Engineering & Cloud AWS
Services AWS Data : S3, Glue, Redshift, Athena, EMR, Lambda
Pipelines et orchestration : Step Functions, Airflow, Lambda Python
Patterns d’architecture data : Data Lake, ETL / ELT, Data Mesh
Transformation data : dbt
DevOps & Industrialisation
Infrastructure as Code : Terraform
CI/CD : GitLab CI/CD
Gestion des environnements DEV / PREPROD / PROD
Versionning du code et de la data : Git, DVC, LakeFS
Sécurité & Gouvernance
IAM, gestion des accès, chiffrement
Gouvernance et catalogage : Glue Data Catalog, Collibra ou équivalent
Profil recherché
Prestation Attendue
Prestation Data Ingénieur et DevOps sur AWS
Data Engineering & DevOps
Conception et mise en œuvre des pipelines de données
Industrialisation des traitements d’ingestion
Supervision des déploiements et mises en production
Gestion des tests techniques, métiers, performance et sécurité
Mise en œuvre des bonnes pratiques AWS (sécurité, coûts, scalabilité)
Collaboration & Méthodologie
Travail en collaboration avec les équipes DSI et data
Contribution aux phases de cadrage et de définition des cas d’usage
Reporting régulier auprès des parties prenantes
Documentation & Transfert de compétences
Documentation des data products
Rédaction de modes opératoires
Transfert de compétences vers les équipes internes
Livrables
Architecture des data products mis en œuvre
Reporting hebdomadaire
Modes opératoires
Cahiers de recette
Documentation technique et fonctionnelle
Lieu : Île?de?France, Plaisir
Télétravail Jusqu’à 40 % (2 jours)
Environnement de travail
Prestation Attendue
Prestation Data Ingénieur et DevOps sur AWS
Data Engineering & DevOps
Conception et mise en œuvre des pipelines de données
Industrialisation des traitements d’ingestion
Supervision des déploiements et mises en production
Gestion des tests techniques, métiers, performance et sécurité
Mise en œuvre des bonnes pratiques AWS (sécurité, coûts, scalabilité)
Collaboration & Méthodologie
Travail en collaboration avec les équipes DSI et data
Contribution aux phases de cadrage et de définition des cas d’usage
Reporting régulier auprès des parties prenantes
Documentation & Transfert de compétences
Documentation des data products
Rédaction de modes opératoires
Transfert de compétences vers les équipes internes
Livrables
Architecture des data products mis en œuvre
Reporting hebdomadaire
Modes opératoires
Cahiers de recette
Documentation technique et fonctionnelle
Lieu : Île?de?France, Plaisir
Télétravail Jusqu’à 40 % (2 jours)
Postulez à cette offre !
Trouvez votre prochaine mission parmi +10 000 offres !
-
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
-
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
-
100% gratuit
Aucune commission prélevée sur votre mission freelance.
POT9141 - Un Data Ingénieur DevOps sur AWS sur Plaisir
Almatek