Offre d'emploi Data Engineer
Niort (79)
Signe +
Le poste Data Engineer
Partager cette offre
Mission : Un profilData ingénieur / Software ingénieur orienté Data avec une expérience significative sur Azure Databricks, python (software engineering) et PySpark.
La connaissance des concepts de Machine Learning, notamment des algorithmes de type bagging et boosting, constitue un atout apprécié.
En tant que Data/Software ingénieur, le prestataire interviendra au sein d'une équipe agile SAFe et contribuera, au travers de user stories, aux activités suivantes :
-Conception et développement des pipelines Data et ML industrialisées et robustes
o Pipelines Batch sous Azure Databricks
o Utilisation avancée de PySpark, Delta Lake, MLFlow, , Workflows
o Optimisation des performances : partitionnement, gestion mémoire, exploitation GPU
o Mise en place de mécanismes de reprise d'erreur, de traçabilité et de monitoring
o Collaboration étroite avec les data scientists pour transformer les prototypes en solutions industrielles
-Développement logiciel et services
o Conception et développement de packages python
o Respect des standards de développement du socle (qualité du code, tests unitaires, CI/CD, documentation, …)
o API sous Azure Function et/ou Azure Container Apps
-Contribution aux phases projets (étude de faisabilité, architecture, conception, réalisation, MEP) et aux différents activités de RUN et d'amélioration continue
-Participation active aux rituels agiles
3j/semaine sur site
Compétences techniques requises :
Azure Databricks
PySpark
Delta Lake
Python
Profil recherché
Mission : Un profilData ingénieur / Software ingénieur orienté Data avec une expérience significative sur Azure Databricks, python (software engineering) et PySpark.
La connaissance des concepts de Machine Learning, notamment des algorithmes de type bagging et boosting, constitue un atout apprécié.
En tant que Data/Software ingénieur, le prestataire interviendra au sein d'une équipe agile SAFe et contribuera, au travers de user stories, aux activités suivantes :
-Conception et développement des pipelines Data et ML industrialisées et robustes
o Pipelines Batch sous Azure Databricks
o Utilisation avancée de PySpark, Delta Lake, MLFlow, , Workflows
o Optimisation des performances : partitionnement, gestion mémoire, exploitation GPU
o Mise en place de mécanismes de reprise d'erreur, de traçabilité et de monitoring
o Collaboration étroite avec les data scientists pour transformer les prototypes en solutions industrielles
-Développement logiciel et services
o Conception et développement de packages python
o Respect des standards de développement du socle (qualité du code, tests unitaires, CI/CD, documentation, …)
o API sous Azure Function et/ou Azure Container Apps
-Contribution aux phases projets (étude de faisabilité, architecture, conception, réalisation, MEP) et aux différents activités de RUN et d'amélioration continue
-Participation active aux rituels agiles
3j/semaine sur site
Compétences techniques requises :
Azure Databricks
PySpark
Delta Lake
Python
Environnement de travail
DGTL / Signe + est le facilitateur pour tous les acteurs qui recherchent des ressources ou des missions DATA.
Spécialiste du marché Data et BI, nous intervenons dans toute la France comme à l'étranger ; en sous-traitance, pré-embauche, recrutement, portage commercial, portage salarial, etc.
Depuis 2018, nous accompagnons nos clients avec proximité, juste prix et préoccupation éthique de tous les instants.
-lien masqué-
Postulez à cette offre !
Trouvez votre prochaine mission parmi +10 000 offres !
-
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
-
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
-
100% gratuit
Aucune commission prélevée sur votre mission freelance.
Data Engineer
Signe +