Job Vacancy QA IA

Courbevoie (92)

Raedy

Azure

Gherkin

Large Language Model (LLM)

RAG

Published on 02/11/2026

Share this job

Notre client est un grand cabinet d’audit et de conseil. Il développe et opère en interne une quinzaine de produits applicatifs en C# .NET / Vue.js sur Microsoft Azure, destinés à ses métiers Audit, Advisory et à ses fonctions support.

Vos missions

Concevoir, développer et améliorer des agents IA de conception et de scripting de tests : génération de cas de test, de scénarios et de scripts automatisés
Définir et mettre en œuvre la stratégie de qualification des solutions IA (LLM, RAG, agents)
Mettre en place des méthodes d’évaluation adaptées à l’IA générative :
jeux de tests de référence
métriques de qualité (pertinence, fidélité, hallucinations)
non-régression des prompts et des modèles
Sécuriser le passage du POC au produit : critères d’acceptation, robustesse, sécurité (injection de prompt, fuite de données), performance et maîtrise des coûts
Intégrer les tests dans les chaînes CI/CD (Azure DevOps / GitHub)
Accompagner les équipes produit sur les bonnes pratiques qualité appliquées à l’IA

Candidate profile

Expérience confirmée en QA / ingénierie de la qualité, niveau Senior / Expert
Indispensable : une solide expérience en automatisation des tests, avec conception et maintenance de frameworks automatisés en production (Playwright, Selenium, Cypress, SpecFlow ou équivalent) et intégration dans les chaînes CI/CD
Indispensable : la maîtrise d’au moins un langage d’automatisation (C#, Python ou TypeScript), avec du code de test écrit au quotidien
Indispensable : une expérience concrète et démontrable de développement assisté par IA et de mise en production d’applications à base de LLM (Azure OpenAI / AI Foundry ou équivalent)
Indispensable : une réalisation IA à présenter en entretien, sous forme d’agent, d’application LLM en production, de dépôt de code ou de démonstration
Pratique des briques IA générative : prompt engineering, RAG, frameworks d’agents (Semantic Kernel, LangChain, AutoGen ou équivalent)
Seraient un plus :
connaissance des outils d’évaluation LLM (Azure AI Foundry evaluation, Promptfoo, DeepEval, Ragas…)
environnement Azure : Azure OpenAI, AI Search, Azure DevOps

Discover Raedy

Paris, France

20 - 99 employees

IT services

La révolution numérique est une opportunité à saisir pour chaque entreprise. Fort de notre expérience, nous les aidons à développer une vision augmentée d’elles-mêmes. Nous construisons ensemble un environnement 4.0 prenant en compte les aspects stratégiques, humains, organisationnels et technologiques. À l’ère du digital, les entreprises ont plus que besoin de se ré-inventer grâce à des solutions Blockchain, intelligence artificielle (IA), réalité augmentée… Notre projet. Avec plus de 30 ans d’expérience dans le domaine informatique, le projet d’Ipanema est d’accompagner les entreprises à 360° dans la transformation digitale. Nos équipes s’engagent à proposer les solutions les plus pertinentes. Ceci afin d’améliorer l’image, la visibilité et la productivité des entreprises. L’après Covid a permis de mettre en place des nouvelles méthodes « Remote » qui permettent de manager des équipes avec plus de fluidité, d’efficacité et d’autonomie.

Apply to this job!

Find your next career move from +10,000 jobs!

Manage your visibility
Salary, remote work... Define all the criteria that are important to you.
Get discovered
Recruiters come directly to look for their future hires in our CV library.
Join a community
Connect with like-minded tech and IT professionals on a daily basis through our forum.

QA IA

Raedy