Trouvez votre prochaine mission ou futur job IT.

Votre recherche renvoie 738 résultats.
Freelance
CDI

Offre d'emploiAI Agent Engineer (pas de full remote, 3j sur site par semaine - Lille)

ANDEMA
Publiée le
Agent IA
Google Cloud Platform (GCP)
Python

12 mois
45k-50k €
400-500 €
Lille, Hauts-de-France
Vous rejoignez le client en tant qu'AI Agent Builder, au cœur de notre infrastructure. Votre terrain de jeu : tous les départements internes, des millions de transactions, des données riches et des problématiques métier concrètes, fraude, conversion, comportements marchands. Vous n'êtes pas là pour faire de la R&D dans le vide. Votre mission est de concevoir, construire et déployer en production des agents IA autonomes ainsi que la plateforme qui les gère, capables d'exécuter des tâches complexes, d'orchestrer des outils et des API, et de prendre des décisions dans un cadre défini, le tout avec une gouvernance rigoureuse pour garantir sécurité et conformité à tout moment, aussi bien pour un usage interne que directement dans le produit. Vous travaillez en lien étroit avec l'ensemble des équipes du client. Ce que vous ferez concrètement : Concevoir des agents IA de bout en bout Vous identifiez les cas d'usage à fort potentiel d'automatisation agentique : support client, opérations internes, assistance marchande dans le produit… Vous concevez l'architecture de l'agent : découpage des tâches, choix des outils exposés, stratégie de raisonnement, boucles de correction Vous intégrez ces agents dans notre écosystème produit et nos outils internes, avec les mêmes exigences de robustesse et de scalabilité que n'importe quel composant en production Vous bâtissez la plateforme de gestion des agents et assurez la gouvernance pour garantir la sécurité et la conformité à tout moment Évaluer, monitorer et itérer Vous construisez des frameworks d'évaluation pour mesurer la fiabilité, la pertinence et les dérives de vos agents, pas seulement leur capacité à produire une réponse qui sonne bien Vous monitorez le comportement des agents en production et mettez en place les garde-fous nécessaires (limites d'action, validation humaine, fallback) Vous itérez rapidement à partir des retours terrain et des métriques business Embarquer les équipes Vous travaillez en lien étroit avec notre AI Engineer, les équipes Tech & Data pour cadrer les cas d'usage et livrer des agents qui s'intègrent réellement dans les processus existants Vous accompagner l'ensemble des équipes (Tech et non-Tech) dans l'adoption des outils agentiques afin de leur donner les outils et la connaissance nécessaires à la création d'agents en autonomie. Stack et environnement LLM APIs (OpenAI, Anthropic, autres selon le besoin), frameworks agentiques (type LangGraph, LangChain, CrewAI ou équivalent), ainsi que des solutions no-code / low-code d'orchestration d'agents (type n8n, Dust ou équivalent) Python, GCP (BigQuery, Dataform, Pub/Sub), bases vectorielles pour le RAG Méthodologie agile, forte proximité avec les équipes Data et Tech
Voir cette offre
Offre premium
Freelance

Mission freelanceApplication Security Program - International Industry - 92

Montreal Associates
Publiée le
DevSecOps
OWASP
SecOps

6 mois
650-750 €
Puteaux, Île-de-France
🔐 𝗖𝗼𝗻𝘀𝘂𝗹𝘁𝗮𝗻𝘁 𝗦𝗲𝗻𝗶𝗼𝗿 – 𝗦𝗵𝗶𝗳𝘁-𝗟𝗲𝗳𝘁 𝗔𝗽𝗽𝗹𝗶𝗰𝗮𝘁𝗶𝗼𝗻 𝗦𝗲𝗰𝘂𝗿𝗶𝘁𝘆 𝗣𝗿𝗼𝗴𝗿𝗮𝗺 | 𝗚𝗿𝗼𝘂𝗽𝗲 𝗜𝗻𝗱𝘂𝘀𝘁𝗿𝗶𝗲𝗹 𝗜𝗻𝘁𝗲𝗿𝗻𝗮𝘁𝗶𝗼𝗻𝗮𝗹 🚀 𝗩𝗼𝘂𝘀 𝗲̂𝘁𝗲𝘀 𝗽𝗮𝘀𝘀𝗶𝗼𝗻𝗻𝗲́(𝗲) 𝗽𝗮𝗿 𝗹𝗮 𝘀𝗲́𝗰𝘂𝗿𝗶𝘁𝗲́ 𝗮𝗽𝗽𝗹𝗶𝗰𝗮𝘁𝗶𝘃𝗲 𝗲𝘁 𝘀𝗼𝘂𝗵𝗮𝗶𝘁𝗲𝘇 𝗰𝗼𝗻𝘁𝗿𝗶𝗯𝘂𝗲𝗿 𝗮̀ 𝘂𝗻 𝗽𝗿𝗼𝗴𝗿𝗮𝗺𝗺𝗲 𝘀𝘁𝗿𝗮𝘁𝗲́𝗴𝗶𝗾𝘂𝗲 𝗮̀ 𝗹'𝗲́𝗰𝗵𝗲𝗹𝗹𝗲 𝗶𝗻𝘁𝗲𝗿𝗻𝗮𝘁𝗶𝗼𝗻𝗮𝗹𝗲 ? Dans le cadre d'une initiative majeure visant à intégrer la sécurité dès la conception des applications, nous recherchons un Consultant Senior Application Security / DevSecOps capable d'accompagner la définition, la gouvernance et le déploiement d'un programme global de sécurisation des développements. Vos missions ✅ Définir et structurer les standards Secure SDLC et DevSecOps ✅ Construire les modèles opérationnels, processus, KPI et gouvernance ✅ Piloter des études de marché, benchmarks, PoC, RFI/RFP autour des solutions AppSec ✅ Accompagner l'intégration des pratiques de sécurité dans les chaînes CI/CD ✅ Sécuriser la Software Supply Chain et la gestion des dépendances logicielles ✅ Sensibiliser et accompagner les équipes de développement à l'adoption des bonnes pratiques Secure Coding ✅ Contribuer aux travaux relatifs à l'IA générative, à la sécurité des agents IA et aux nouveaux usages du développement assisté par l'IA Profil recherché ✔ 5 ans d'expérience minimum en Application Security, DevSecOps ou Secure SDLC ✔ Expérience confirmée dans des environnements grands comptes internationaux ✔ Solide maîtrise des sujets : OWASP SSDLC DevSecOps SAST / DAST / IAST / SCA GitLab / GitHub Secrets Management Software Supply Chain Security Infrastructure as Code Security AI Security ✔ Très bonnes capacités de communication, coordination et pilotage transverse ✔ Anglais fluide indispensable Vous avez déjà participé à la transformation DevSecOps d'un grand groupe ou au déploiement d'un programme Application Security à grande échelle ? Échangeons. #ApplicationSecurity #AppSec #DevSecOps #SSDLC #SecureSDLC #OWASP #CyberSecurity #SoftwareSecurity #SecureCoding #AISecurity #Freelance
Voir cette offre
Offre premium
CDI

Offre d'emploiBusiness Manager IT – F/H

ASTRELYA
Publiée le
Commercial

Paris, France
Astrelya est un cabinet de conseil franco‑suisse, en très forte croissance depuis sa création en 2017, spécialisé dans la transformation digitale, l'excellence opérationnelle et l'innovation technologique. Il est composé de 300 experts passionnés. Le cabinet accompagne ses clients sur l'ensemble du cycle de transformation, depuis la phase de cadrage jusqu'à la mise en œuvre opérationnelle, avec une expertise forte en Data/IA, Cloud, DevOps et méthodes agiles. Astrelya se distingue par un modèle fondé sur la proximité, la confiance et une culture humaine forte, qui place les collaborateurs au cœur de la création de valeur. Votre mission : En tant que Business Manager IT, vous jouez un rôle clé dans le développement, la structuration et le pilotage d'une activité stratégique au sein d'Astrelya. Vous intervenez sur l'ensemble du cycle business : développement commercial, pilotage client, recrutement, management des équipes et gestion de votre centre de profit. Concrètement, vous allez : · Développer un portefeuille clients. · Détecter les besoins, négocier et conclure des prestations IT à forte valeur ajoutée. · Participer aux réponses aux appels d'offres et à la construction des offres commerciales. · Définir les ressources nécessaires et garantir le bon déroulement des projets de vos clients. · Participer au recrutement des consultants de votre périmètre. · Encadrer, accompagner et faire évoluer votre équipe (suivi carrière, montée en compétences, coaching). · Piloter votre centre de profit : business plan, stratégie commerciale, chiffre d'affaires, marge, rentabilité. · Fédérer vos équipes et assurer un haut niveau de satisfaction client. Votre futur environnement : Vous évoluez au sein d'une équipe Business composée de Managers, de Sales et de Talent Acquisition Specialist, reconnue pour son agilité, sa pédagogie et sa bienveillance. Vous êtes accompagné(e) par une direction ayant déjà mené plusieurs success stories dans la création et le développement de sociétés de conseil. Votre périmètre s'appuie sur les expertises fortes d'Astrelya : · Data & IA · Conseil et transformation · Développement augmenté à l'IA · DataOPS & DevOPS Cloud
Voir cette offre
CDI
Freelance

Offre d'emploiDirecteur de Projet Cybersécurité H/F

Le Groupe SYD
Publiée le
Cybersécurité

6 mois
60k-70k €
550-650 €
Paris, France
🌟 Quel sera ton poste ? 🌟 📍Lieu : Paris 🏠 Télétravail : Flexible 📝Contrat : CDI ou Freelance/Portage Début de mission : ASAP 👉 Contexte client : L'IA transforme profondément les enjeux de cybersécurité. Pour accompagner cette évolution, nous recherchons un(e) Directeur(trice) de Projet Cybersécurité pour un de nos clients, capable de piloter un programme stratégique visant à renforcer la résilience de son SI face aux nouvelles menaces et opportunités liées à l'intelligence artificielle. Tu auras pour missions de : Piloter l'ensemble du programme et coordonner les équipes IT, cybersécurité, data et métiers Construire la roadmap, les jalons et les plans d'actions Évaluer l'exposition du SI et définir les priorités de remédiation Faire évoluer les capacités de détection, réponse et gestion des vulnérabilités Mettre en place et animer la gouvernance du programme Piloter les risques cyber, techniques et organisationnels Aligner les actions avec les initiatives existantes (SOC, vulnérabilités, infrastructures, production) Consolider les livrables, indicateurs et reportings Définir une stratégie IA Cyber à moyen et long terme Suivre les KPI de performance et de résilience (TTD, MTTR, MTTP, automatisation...) Livrables attendus : Cartographie de l'exposition du SI Roadmap de transformation cybersécurité Modèle cible de cyberdéfense augmentée par l'IA Stratégie IA Cyber Gouvernance et dispositif de gestion de crise Plan d'automatisation des remédiations et du patching Catalogue de cas d'usage IA appliqués à la cybersécurité Reporting programme et tableaux de bord de pilotage
Voir cette offre
Freelance

Mission freelance269 - Data Scientist Python Senior – Analytics Factory (H/F)

Nicholson SAS
Publiée le
BigQuery
CI/CD
Google Cloud Platform (GCP)

2 ans
510 €
Massy, Île-de-France
Présentation du contexteL'Analytics Factory conçoit et développe des services analytiques avancés pour fournir aux équipes métier des données et des analyses fiables. L'objectif est de soutenir la transformation analytique et d'appuyer la prise de décision stratégique dans tous les domaines de l'entreprise. Dans le cadre de la digitalisation du processus promotionnel PGC via un portail amont collaboratif intégrant directement les fournisseurs, nous recherchons un(e) Data Scientist Python Senior pour concevoir et déployer des solutions d'Intelligence Artificielle de pointe. 🚀 Missions et Périmètre Fonctionnel (IA)Le projet s'articule autour du déploiement de 3 agents intelligents (IA Agentique) : Agent Négo : Automatisation des demandes, simulations d'impact (CA / marge) et formulation de contre-propositions. Agent Pilotage : Ajustement dynamique des catalogues sous contraintes et système d'alertes en temps réel. Agent Admin : Génération automatisée des Appels d'Offres (AO) et des mandats. Intégration & Écosystème : Connexion et intégration obligatoires des modèles au sein de l'écosystème Data interne. 🗺️ Roadmap du projetS1 2027 : Déploiement du socle collaboratif de base. S2 2027 : Déploiement complet et mise en production des agents IA. Conditions de la missionDate de démarrage : ASAP Date de fin prévisionnelle : 02/07/2029 (Mission longue visibilité) Localisation : Massy (Essonne) Rythme de travail : Hybride (2 jours par semaine sur site obligatoires) Tarif Journalier Maximum (Prix d'achat max) : 510 € / jour
Voir cette offre
Freelance
CDI

Offre d'emploiData & AI Engineer Senior (H/F)

Freelance.com
Publiée le
Agent IA
IA Générative

1 an
40k-45k €
400-580 €
Bois-Colombes, Île-de-France
📍 Localisation : Bois-Colombes 📅 Démarrage : 4 septembre 🏠 Télétravail : 3 jours par semaine 💼 Mission longue durée en régie (3 mois renouvelables) 🌍 Contexte international 🗣️ Anglais courant obligatoire Descriptif du posteDans le cadre du renforcement de son Data Office, un grand groupe international recherche un(e) Data & AI Engineer Senior pour intervenir sur des projets stratégiques autour de la gouvernance des données, de la qualité des données et de l'intelligence artificielle générative. Vos principales missions seront : Data Management & Data GovernanceConcevoir, développer et maintenir des applications Python dédiées à la gouvernance et à la qualité des données. Mettre en place des contrôles automatisés, des mécanismes de détection d'anomalies et des solutions de monitoring. Industrialiser les traitements liés à la collecte, l'analyse et le reporting des indicateurs de qualité. Développer des API et services facilitant l'intégration avec les plateformes Data, catalogues de données et outils décisionnels. Participer à l'amélioration continue et à l'automatisation des processus Data. IA Générative & Agentic AIConcevoir et développer des assistants IA pour les équipes métier. Développer des solutions Text-to-SQL permettant l'interrogation des données en langage naturel. Mettre en œuvre des architectures basées sur des LLM et des agents intelligents. Développer des connecteurs et intégrations autour du protocole MCP (Model Context Protocol). Participer à l'industrialisation des solutions IA dans des environnements sécurisés et à forte exigence de gouvernance. Contribuer à des projets innovants autour des agents IA, de la qualité des données et de la valorisation des informations.
Voir cette offre
Freelance
CDI

Offre d'emploiHead of AI & Innovation Strategy - Asset Management

VISIAN
Publiée le
AI

1 an
Paris, France
ContexteUn gestionnaire d'actifs de premier plan à l'échelle mondiale, engagé à proposer des solutions d'investissement durables et à stimuler l'innovation dans l'ensemble de ses stratégies d'investissement et de ses opérations. Membre d'un grand groupe bancaire international, l'entreprise s'appuie sur des technologies de pointe et des capacités axées sur les données pour améliorer ses performances, son efficacité et l'expérience client. Missions Diriger la conception, le déploiement et la mise à l'échelle des initiatives d'intelligence artificielle (IA) à l'échelle de l'organisation. Définir et piloter la stratégie informatique de l'entreprise en matière d'IA et d'innovation, en étroite collaboration avec les équipes métier, les équipes chargées des données et le groupe mère. Contribuer à l'identification, à l'expérimentation et à l'industrialisation de solutions innovantes d'IA au service de la gestion d'actifs, des opérations, de la conformité, de la distribution et des activités de service client. Définir et mettre en œuvre la stratégie d'IA et d'innovation en accord avec les priorités du groupe. Industrialiser l'adoption de l'IA à grande échelle dans l'ensemble des métiers. Générer une valeur commerciale mesurable (efficacité, chiffre d'affaires, productivité). Assurer une gouvernance, une conformité et une gestion des risques rigoureuses. Favoriser un écosystème d'innovation et d'expérimentation. Gérer le changement et promouvoir l'intégration de l'IA dans la culture d'entreprise.
Voir cette offre
Freelance

Mission freelanceSenior AI technical lead | AI architecture, enablement & governance

Mon Consultant Indépendant
Publiée le
Gestion de projet

5 mois
500-550 €
Paris, France
Mission de l'équipe : L'équipe constitue le point de contact technique de référence sur les sujets d'Intelligence Artificielle au sein de l'ITTF. Elle accompagne les équipes dans la conception, l'architecture et la réalisation de leurs cas d'usage IA, tout en garantissant leur alignement avec les standards, les plateformes et les exigences de gouvernance du Groupe. Son objectif est d'accélérer l'adoption de l'IA au sein de l'organisation en développant les compétences des équipes, en favorisant la réutilisation des composants existants et en assurant la cohérence des solutions mises en œuvre. 1. Accompagnement des équipes sur les cas d'usage IA · L'équipe accompagne les équipes ITTF dans la conception et la mise en œuvre de leurs cas d'usage IA. · Elle apporte son expertise sur les choix d'architecture, les outils et les bonnes pratiques afin de permettre aux équipes de développer leurs solutions en autonomie, sans se substituer à elles. 2. Support technique aux fonctions ne disposant pas de capacités IA · L'équipe apporte un support opérationnel aux fonctions ne disposant pas d'expertise IA. · Lorsque cela est nécessaire, elle contribue directement au développement de certains cas d'usage afin d'assurer leur bonne réalisation. 3. Standardisation des composants IA · L'équipe est responsable de promouvoir la standardisation des architectures et des composants IA. · Elle favorise la réutilisation des solutions existantes afin d'accélérer les développements, de réduire les coûts et d'assurer une meilleure cohérence entre les différents projets. 4. Gouvernance et conformité · L'équipe veille à ce que l'ensemble des initiatives IA respecte les standards techniques, les plateformes de référence et les exigences de gouvernance définis au niveau Groupe. · Elle garantit ainsi la cohérence, la conformité et la pérennité des solutions déployées. Prestations demandées : La mission interviendra principalement sur les activités suivantes : · Accompagner les équipes ITTF dans la conception et la réalisation de leurs cas d'usage IA. · Apporter une expertise sur les architectures IA, les outils et les bonnes pratiques. · Développer les compétences des équipes afin de favoriser leur autonomie. · Fournir un support technique aux fonctions ne disposant pas de capacités IA et contribuer au développement de certains cas d'usage. · Promouvoir la standardisation et la réutilisation des composants IA afin d'accélérer les développements et d'optimiser les coûts. · Garantir l'alignement des solutions avec les standards, les plateformes et les exigences de gouvernance du Groupe. Profil du candidat : · Intelligence Artificielle · AI Architecture · AI Enablement · Enterprise Architecture · AI Governance · AI Solution Design · AI Best Practices · Standardisation et industrialisation des solutions IA
Voir cette offre
Freelance

Mission freelanceIngénieur Cybersécurité Embarquée - Conception et Validation Fonction Detect React Forensic (DRF)

LeHibou
Publiée le
Agile Scrum
Cybersécurité
IA Générative

12 mois
750 €
Paris, France
Notre client dans le secteur Automobile recherche un/une Ingénieur Cybersécurité Embarquée - Conception et Validation Fonction Detect React Forensic (DRF) H/F Description de la mission : Fiche de Mission – Ingénieur Cybersécurité Embarquée – Conception et Validation Fonction Detect React Forensic (DRF) Contexte et objectif de la mission La mission consiste en la conception et la validation d'une fonction de cybersécurité embarquée de type Detect React Forensic (DRF), dans un contexte automobile. Informations pratiques • Lieu d'exécution : dans les locaux du prestataire, avec possibilité d'intervention sur site client selon une organisation hybride • Mode de fonctionnement : méthode Agile, avec participation à des réunions périodiques avec l'ensemble des parties prenantes du périmètre technique Missions principales et livrables Conception • Recueil du besoin et des cas d'usage associés à la fonction DRF • Élaboration du dossier d'architecture système et logicielle de la fonction DRF • Élaboration du plan de validation de la fonction DRF • Production d'un dossier de capitalisation de la phase de conception Validation • Élaboration du planning des activités de validation • Élaboration du plan de validation détaillé • Conception et réalisation du dossier du banc de validation • Production des rapports de validation pour chaque plan de validation exécuté • Création et mise à jour des rapports d'anomalies (RA) dans l'outil Jira • Production d'un dossier de capitalisation des validations • Production d'une synthèse d'avancement des validations à chaque jalon Profil recherché Domaine métier • Expertise en cybersécurité de l'embarqué, notamment dans le secteur automobile • Expertise en ingénierie système et logicielle • Maîtrise des méthodes et outils d'ingénierie système et logicielle • Maîtrise de la méthode de développement Agile • Compréhension de documents techniques rédigés en langue anglaise Intelligence artificielle • Connaissance des concepts de Machine Learning, d'IA générative, de RAG, de corpus, de LLM, d'agent, d'assistant, de prompt, d'hallucination et de modèle d'IA • Capacité à formuler des requêtes efficaces pour interagir avec des IA génératives et obtenir les résultats souhaités • Usage critique de l'IA, en tenant compte de ses limites et de ses biais • Connaissance des exigences RGPD et des aspects éthiques liés à l'usage de l'IA Certification • Certification SAFe requise Compétences / Qualités indispensables : Cybersécurité embarquée automobile, Ingénierie système et logicielle, Validation système, Méthode Agile, Jira, Anglais technique Compétences / Qualités qui seraient un + : - Informations concernant le télétravail : Oui — 2 jours/semaine
Voir cette offre
Freelance
CDI
CDD

Offre d'emploiDéveloppeur Python Flask & Automatisation STB

R&S TELECOM
Publiée le
Agent IA
Flask
HTML

6 mois
Meudon, Île-de-France
Nous recherchons une expertise en développement pour maintenir et faire évoluer notre application web basée sur Flask. cette application inclus des pages HTML, des routes backend, des formulaires, des templates, ainsi que des intégrations avec des services internes. Nous avons besoin d'assurer la correction d'anomalies, l'amélioration continue, et la robustesse de l'application existante. En parrallèle nous souhaitons développer et automatiser des tests en python, pour les équipements STB , en lien avec les besoins de validation fonctionnelle, non régression et endurances. L'intégration des solutions d'IA sur google plateform est également un axe majeur, notamment pour améliorer l'analyse des résultats de tests, la génération de scénarios, la détection d'anomalies, ou l'aide au diagnostic. Enfin nous souhaitons explorer et développer de nouveaux usages autour de l'IA appliquée aux tests , a l'automatisation, a l'analyse de logs ou a l'optimisation des campagnes de validation. Objectif et livrables Assurer la maintenance et l'évolution des applications web existante en flask Développer et automatiser des tests en python pour les équipements STB Intégrer des solutions d'IA sur Google cloud plateform pour l'analyse et l'optimisation des tests. Explorer de nouveaux usages de l'IA pour l'automatisation et l'analyse de logs Participer a la définition de bonnes pratiques de développement et de tests. Documenter les développements et procédures pour faciliter la maintenance. Collaborer avec les équipes techniques pour proposer et mettre en oeuvre des solutions adaptées.
Voir cette offre
Freelance

Mission freelanceData Scientist spécialisé dans l’évaluation des LLMs

ISUPPLIER
Publiée le
Data science
IA Générative
MLOps

100 jours
400-550 €
Île-de-France, France
Description du poste Dans le cadre du développement et de l'encadrement des usages de l'intelligence artificielle générative au sein de la banque, le groupe souhaite renforcer ses capacités d'évaluation, de qualification et de sécurisation des LLM. Les LLM sont amenés à être utilisés dans différents cas d'usage métiers, que ce soit pour l'assistance aux collaborateurs, l'analyse documentaire, la génération de contenus, l'aide à la décision, l'automatisation de processus ou l'exploitation de bases de connaissances internes. Leur adoption nécessite toutefois un cadre rigoureux afin de garantir leur performance, leur robustesse, leur sécurité, leur conformité et leur adéquation aux exigences du secteur bancaire. La mission consiste à intervenir en tant que Data Scientist spécialisé dans l'évaluation des LLM, afin de définir et de mettre en œuvre des méthodologies d'évaluation, de benchmark et de red teaming des modèles d'IA générative utilisés, testés ou envisagés par le groupe. Cette mission s'inscrit dans une démarche de gouvernance des modèles d'IA, de maîtrise des risques liés à l'IA générative et d'industrialisation des pratiques d'évaluation avant mise en production. Principaux objectifs Définir et mettre en œuvre un cadre d'évaluation des LLM adapté aux enjeux de la banque. Évaluer les performances, limites, risques et comportements des modèles d'IA générative. Réaliser des benchmarks comparatifs entre différents LLM, qu'ils soient internes, open source ou fournis par des éditeurs. Concevoir et exécuter des campagnes de red teaming pour identifier les vulnérabilités, biais, hallucinations et comportements indésirables. Contribuer à la sélection, la validation et la qualification des modèles LLM avant usage ou mise en production. Produire des analyses objectives permettant d'éclairer les décisions métiers, techniques, risques et conformité. Participer à l'industrialisation des processus d'évaluation des LLM dans le cycle de vie des modèles d'IA. Contribuer à la constitution de jeux de tests, métriques, référentiels d'évaluation et outils de suivi. Activités principalesÉvaluation des LLM Définir les protocoles d'évaluation adaptés aux cas d'usage d'IA générative de la banque. Identifier les métriques pertinentes pour mesurer la qualité des réponses générées : exactitude, pertinence, cohérence, complétude, factualité, robustesse, sécurité, explicabilité et conformité. Évaluer les capacités des modèles sur différents types de tâches : résumé, extraction d'information, classification, question-réponse, génération de texte, analyse documentaire, raisonnement, traduction ou reformulation. Mettre en place des jeux de tests représentatifs des usages métiers bancaires. Analyser les performances des modèles selon différents contextes, langues, domaines métiers et niveaux de complexité. Identifier les limites fonctionnelles et techniques des modèles testés. Documenter les résultats d'évaluation et formuler des recommandations. Benchmark LLM Concevoir et conduire des benchmarks comparatifs entre plusieurs modèles LLM. Comparer les modèles selon des critères de performance, coût, latence, robustesse, sécurité, empreinte technique et conformité. Tester différents modèles propriétaires, open source ou internes selon les contraintes du groupe. Mettre en place des grilles d'analyse permettant d'aider au choix des modèles selon les cas d'usage. Évaluer l'impact de différents paramètres : prompt, température, taille de contexte, modèle d'embedding, architecture RAG, fine-tuning ou quantization. Produire des rapports de benchmark clairs, exploitables par les équipes métiers, data, IT, sécurité et conformité. Participer à la définition de standards internes pour la comparaison et la qualification des LLM. Red teaming et sécurité des LLM Définir et exécuter des scénarios de red teaming adaptés aux risques liés à l'IA générative. Tester la résistance des modèles face aux attaques de type prompt injection, jailbreak, data leakage, contournement de garde-fous, génération de contenu inapproprié ou non conforme. Identifier les risques d'hallucination, de biais, de toxicité, de désinformation ou de réponses dangereuses. Concevoir des corpus de prompts adversariaux adaptés aux contextes bancaires et réglementaires. Évaluer la capacité des modèles à respecter les politiques internes, les règles de conformité et les contraintes de sécurité. Analyser les vulnérabilités détectées et proposer des mesures de mitigation. Collaborer avec les équipes sécurité, conformité, risques et architecture pour renforcer le cadre d'usage des LLM. Méthodologie, outillage et industrialisation Mettre en place des outils, notebooks, scripts ou pipelines d'évaluation automatisée. Contribuer à l'industrialisation des campagnes d'évaluation dans le cycle de vie des modèles. Définir des référentiels de métriques et de seuils d'acceptabilité. Construire et maintenir des datasets d'évaluation internes, anonymisés et représentatifs. Participer à l'intégration des résultats d'évaluation dans les outils de gouvernance des modèles, notamment ModelHub v2. Assurer la traçabilité des campagnes d'évaluation, des versions de modèles et des résultats obtenus. Mettre en place des tableaux de bord ou rapports de suivi de la qualité des LLM. Contribuer à la veille technologique sur les méthodes d'évaluation, frameworks de benchmark et pratiques de red teaming LLM. Livrables attendus Cadre méthodologique d'évaluation des LLM adapté aux usages bancaires. Protocoles de test et grilles d'évaluation des modèles d'IA générative. Jeux de tests et datasets d'évaluation documentés. Corpus de prompts de benchmark et de red teaming. Rapports d'évaluation des LLM testés. Rapports de benchmark comparatif entre modèles. Analyses de risques liées aux comportements des LLM. Synthèses des vulnérabilités identifiées lors des campagnes de red teaming. Recommandations de mitigation et plans d'amélioration. Tableaux de bord ou indicateurs de suivi de performance et de sécurité. Scripts, notebooks ou pipelines d'évaluation automatisée. Documentation des métriques, seuils et critères de validation. Recommandations pour la sélection et la mise en production des modèles. Contributions à l'intégration des résultats d'évaluation dans ModelHub v2 ou tout autre outil de gouvernance IA. Supports de présentation à destination des équipes métiers, techniques,
Voir cette offre
Freelance
CDI

Offre d'emploiData & AI Engineer Senior – Data Office sur Bois-Colombes

EterniTech
Publiée le
AI
API REST
Data Warehouse

3 mois
Bois-Colombes, Île-de-France
ContexteAu sein du Data Office de Coface, le consultant intervient dans un contexte international pour développer et industrialiser des solutions autour de la Data Management, Data Quality, Data Governance et de l'IA générative. Missions 1. Data Management, Data Governance & Data QualityConcevoir, développer et maintenir des applications et services Python destinés à automatiser les processus de Data Governance et Data Quality. Développer des mécanismes de contrôle de la qualité des données, de détection d'anomalies et de monitoring. Industrialiser les traitements de collecte, d'analyse et de reporting liés à la qualité des données. Développer des APIs REST et services MCP permettant d'interconnecter les outils du Data Office, Data Marketplace, catalogues de données, plateformes data et outils BI. Automatiser et optimiser les processus de gestion des données. Contribuer à la mise en place de solutions robustes, maintenables et conformes aux standards d'architecture et de sécurité du Groupe. 2. IA Générative & Agentic AIConcevoir et développer des assistants IA spécialisés pour les besoins du Data Office. Développer des solutions de Text-to-SQL permettant d'interroger des bases de données en langage naturel. Concevoir des architectures Agentic AI basées sur des LLM, avec mécanismes d'orchestration, raisonnement et accès aux différentes sources d'information. Développer des connecteurs et intégrations via le Model Context Protocol (MCP). Mettre en œuvre des architectures de type RAG et intégrer différentes sources de données et de connaissances. Participer à l'industrialisation et au déploiement des solutions IA en environnement de production. Veiller au respect des exigences de sécurité, gouvernance, architecture et exploitation. Contribuer aux initiatives IA existantes du Data Office, notamment : l'agent Jira permettant d'évaluer la qualité des tickets entrants et d'anticiper leur criticité ; l'agent de requêtage de bases de données en Text-to-SQL. 3. Industrialisation & accompagnementProduire du code, packages Python, APIs et services documentés, testés et maintenables. Mettre en place les pipelines d'intégration et de déploiement nécessaires à l'industrialisation des solutions. Rédiger la documentation technique et d'exploitation ainsi que les procédures de déploiement. Participer aux phases de tests, mise en production et maintien en conditions opérationnelles. Assurer un reporting régulier sur l'avancement, les risques, les dépendances et les arbitrages nécessaires. Communiquer efficacement les résultats et sujets techniques auprès d'interlocuteurs techniques et métiers.
Voir cette offre

Déposez votre CV

  • Fixez vos conditions

    Rémunération, télétravail... Définissez tous les critères importants pour vous.

  • Faites-vous chasser

    Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.

  • 100% gratuit

    Aucune commission prélevée sur votre mission freelance.

Voir tous les derniers posts

Au service des talents IT

Free-Work est une plateforme qui s'adresse à tous les professionnels des métiers de l'informatique.

Ses contenus et son jobboard IT sont mis à disposition 100% gratuitement pour les indépendants et les salariés du secteur.

Free-workers
Ressources
A propos
Espace recruteurs
2026 © Free-Work / AGSI SAS
Suivez-nous