Mission freelance dataiku snowflake

Au sein de notre Cloud AWS, nous faisons converger nos univers big data et BI coeur de métier assurance. Dans ce cadre le service 'Data Analyst' change d'outils de préparation de données et de stockage. Ainsi, la préparation des données passe de Matillion (générateur de SQL avec moteur de BDD Redshift) à Data Science Studio (Dataïku), et le stockage passe de S3/Redshift à Snowflake. Le renfort recherché doit :- réaliser cette migration sur une partie des data prep en production- accompagner les équipes dans leur montée en compétence sur Snowflake et Dataïku- permettre à l'équipe de maintenir sa productivité en parallèle de la migration. Nature et étendue de la prestation Le renfort interviendra en tant que 'Data Analyst'. Il sera en charge de la transformation des dataprep de Matillion vers SnowFlake/DSS en collaboration avec les DA de l'équipe. Il devra être en capacité de faire de la pédagogie auprès des équipes de DA afin d'optimiser le code existant pour qu'il soit utilisé sur un nouveau flow DSS avec Snowflake Il devra également participer aux réunions qui l'impacteront Livrables attendus & planning- Aplatissement/Optimisation des requêtes existantes dans Matillion (Redshift SQL)- Migration des requêtes dans de nouveaux flows dans DSS avec le connecteur Snowflake SQL- Comparaison du contenu et de la volumétrie entre les tables finales existantes (S3) et les nouvelles tables (Snowflake)- Mise en place de métriques et de vérification dans le flow DSS- Documentation des flows- Paramétrage de l'exécution des traitements Airflow via dynamoDB