Offre d'emploi Date engineer

Son rôle principal consiste à garantir un accès qualitatif aux différentes sources de données disponibles. Cela implique de veiller à ce que les données soient maîtrisées et utilisées de manière optimale, en assurant leur référencement, leur normalisation et leur qualification. Cette approche vise à faciliter l'exploitation des données par les équipes de Data Analysts et de Data Scientists.

Dans l'environnement de travail utilisé, plusieurs outils et technologies sont mis en œuvre pour répondre aux besoins des projets. Le langage Python est largement adopté pour le développement et l'automatisation des tâches, tandis que des frameworks tels que Lambda et Step Functions sont employés pour créer des applications évolutives et orientées événements sur AWS.

Pour le stockage et la gestion des données, des solutions comme AWS RDS, PostgreSQL et Snowflake sont exploitées, fournissant une infrastructure robuste et hautement performante pour les bases de données. Spark est utilisé pour le traitement et l'analyse des données à grande échelle, permettant d'obtenir des insights approfondis et des performances optimisées.

La méthodologie de travail est basée sur des pratiques Agiles, avec une préférence pour le cadre Scrum et une adaptation aux principes du Scaled Agile Framework (SAFe) pour les projets de plus grande envergure. Une grande importance est accordée aux revues de code, favorisant ainsi la collaboration, la qualité et l'amélioration continue des produits et des processus.