Job position Senior Data Engineer / Data Platform Engineer (H/F)
Share this job
Dans le cadre de notre croissance et de nos projets de transformation digitale, nous recherchons un(e) Senior Data Engineer pour accompagner nos clients dans la conception, le développement et l'industrialisation de plateformes Data modernes.
Vous interviendrez sur des projets stratégiques autour des architectures Data Cloud, des plateformes Big Data, des traitements temps réel et de la valorisation des données, dans des environnements techniques exigeants et à forte volumétrie.
En collaboration avec les Architectes Data, Data Scientists, Business Analysts, DevOps et équipes métiers, vous participerez à la conception de solutions robustes, évolutives et sécurisées répondant aux enjeux de performance et de gouvernance des données.
Vos missionsEn tant que Senior Data Engineer, vous serez amené(e) à :
Concevoir et développer des architectures Data évolutives et performantes.
Développer, maintenir et optimiser des pipelines de données (ETL / ELT) en mode batch et streaming.
Concevoir et exploiter des plateformes Data Lake, Data Warehouse et Lakehouse.
Mettre en œuvre des solutions d'ingestion de données issues de multiples sources (API, bases de données, fichiers, IoT, événements temps réel).
Développer des traitements distribués pour de forts volumes de données.
Industrialiser les traitements Data grâce aux pratiques DevOps et DataOps.
Concevoir les chaînes CI/CD des plateformes Data.
Garantir la qualité, la traçabilité, la sécurité et la gouvernance des données.
Optimiser les performances des traitements et les coûts d'exploitation des infrastructures Cloud (FinOps).
Participer à la définition des architectures techniques et aux choix technologiques.
Assurer le monitoring, l'observabilité et le support des plateformes Data.
Produire la documentation technique et accompagner les équipes dans le partage des bonnes pratiques.
Participer aux revues de code et contribuer à l'amélioration continue des plateformes.
Selon les projets, vous pourrez également intervenir sur :
la définition de référentiels techniques,
l'accompagnement des équipes de développement,
le mentorat de Data Engineers,
ou l'évolution vers un rôle de Tech Lead ou de Data Architect.
Candidate profile
Diplômé(e) d'une école d'ingénieur ou d'un Master (Bac+5) en informatique ou Data Engineering, vous justifiez d'une expérience significative dans la conception et le développement de plateformes Data modernes.
Vous êtes à l'aise aussi bien dans les phases de conception que dans le développement et l'industrialisation des solutions.
Vous appréciez les environnements Cloud, les architectures distribuées et les problématiques de performance liées aux traitements de données à grande échelle.
Compétences techniquesLangagesPython (indispensable)
SQL avancé (indispensable)
PySpark
Scala ou Java (apprécié)
Développement de pipelines ETL / ELT
Data Lake
Data Warehouse
Lakehouse
Modélisation des données
Data Quality
Data Governance
Data Catalog
Architecture Medallion (Bronze / Silver / Gold)
Apache Spark
PySpark
Databricks
Delta Lake
Apache Kafka
Azure Event Hub
Google Pub/Sub
Traitements temps réel
Une expérience sur au moins une des plateformes suivantes est attendue :
Microsoft Azure
Amazon Web Services (AWS)
Google Cloud Platform (GCP)
Services fréquemment rencontrés :
Azure Data Factory
Azure Synapse Analytics
AWS Glue
Amazon S3
BigQuery
Google Cloud Storage
Dataproc
Talend
Azure Data Factory
SSIS
dbt (apprécié)
SQL Server
PostgreSQL
Oracle
Snowflake
BigQuery
Git
Azure DevOps
GitLab CI
GitHub Actions
Jenkins
Docker
Kubernetes
Infrastructure as Code
Terraform (apprécié)
Grafana
Prometheus
Alerting
Logging
Supervision des pipelines
Optimisation des coûts Cloud
Suivi de la consommation des plateformes Data
Optimisation des traitements distribués
Working environment
Chaque année vous bénéficierez d’une formation pour vous aider à développer ou renforcer vos compétences.
Prime de cooptation très avantageuse et non plafonnée.
Etat d'esprit: une ambiance jeune, dynamique et des moments de convivialité (apéro, team-building et plus encore).
Apply to this job!
Find your next career move from +9,000 jobs!
-
Manage your visibility
Salary, remote work... Define all the criteria that are important to you.
-
Get discovered
Recruiters come directly to look for their future hires in our CV library.
-
Join a community
Connect with like-minded tech and IT professionals on a daily basis through our forum.
Senior Data Engineer / Data Platform Engineer (H/F)
Lùkla
