En bref
- Le sujet porte sur l’évaluation, la sécurité et l’observabilité des applications LLM.
- La formation s’adresse aux ingénieurs IA, développeurs d’applications LLM, responsables techniques et équipes de mise en production.
- Les modalités envisagées sont le présentiel ou la formation à distance.
- La mission concerne la région Marrakech Safi, notamment Marrakech, Safi et Essaouira.
- FormaGroup recrute des formateurs et formatrices pour animer cette formation.
Villes concernées
MarrakechSafiEssaouira
Votre rôle chez FormaGroup
Vous maîtrisez les méthodes de test et de suivi des applications utilisant des modèles de langage et souhaitez transmettre votre expertise à des équipes techniques ? FormaGroup recherche des formateurs et formatrices capables d’accompagner des entreprises et des particuliers dans la région Marrakech Safi, en présentiel ou à distance.
Missions confiées
- 1Présenter les risques et les modes de défaillance des applications LLM, puis aider les participants à repérer les limites propres à leurs usages.
- 2Accompagner la conception de jeux de tests et de jeux de référence représentatifs pour évaluer une application LLM.
- 3Faire pratiquer la mesure de la pertinence, de la fidélité et de la robustesse des réponses, notamment pour les systèmes RAG.
- 4Animer des exercices de détection d’injections de prompt et de divulgation de données, puis travailler sur le filtrage des entrées et le contrôle des sorties.
- 5Guider les participants dans la mise en place de traces et d’indicateurs d’usage, ainsi que dans le suivi des versions en production.
- 6Faire élaborer un plan de mise en production et une procédure d’incident, en faisant documenter les limites et les contrôles à prévoir.
Programme de formation à animer
Une maîtrise pédagogique des thèmes suivants est attendue :
Module 1Risques et modes de défaillance des applications LLM
Module 2Conception de jeux de tests et jeux de référence
Module 3Évaluation des réponses et des systèmes RAG
Module 4Injection de prompt et filtrage des entrées
Module 5Protection des données et contrôle des sorties
Module 6Traçage, observabilité et suivi des versions
Module 7Plan de mise en production et procédure d’incident
Objectifs pédagogiques
Voir le programme complet de la formation →- Définir un jeu de tests représentatif pour une application LLM
- Mesurer la pertinence, la fidélité et la robustesse des réponses
- Repérer les risques d’injection de prompt et de divulgation
- Mettre en place des traces et indicateurs d’usage
- Documenter les limites et les procédures de contrôle
Public à former
La formation s’adresse aux ingénieurs IA, aux développeurs d’applications LLM, aux responsables techniques et aux équipes de mise en production. Elle porte sur les méthodes de test, de sécurisation et de suivi des applications utilisant des modèles de langage.
Approche pédagogique attendue
- Alterner les explications sur les risques et modes de défaillance avec des exercices de repérage appliqués à des cas d’usage LLM.
- Faire construire aux participants des jeux de tests et des jeux de référence, puis les utiliser pour examiner la pertinence, la fidélité et la robustesse des réponses.
- Encadrer des mises en situation autour des injections de prompt, du filtrage des entrées, de la protection des données et du contrôle des sorties.
- Proposer des ateliers de traçage et de définition d’indicateurs, puis faire préparer un plan de mise en production et une procédure d’incident.
- Faire documenter les limites identifiées et les procédures de contrôle afin que les participants puissent restituer leurs choix.
Profil recherché
- Vous disposez d’une expertise confirmée en évaluation, sécurité et observabilité des applications LLM, en lien avec les sujets abordés dans le programme.
- Vous avez une expérience de la formation d’adultes et savez rendre accessibles des notions techniques à des profils d’ingénieurs IA, de développeurs et de responsables techniques.
- Vous êtes capable d’enseigner la conception de tests, l’évaluation des réponses et des systèmes RAG, ainsi que la prévention des injections de prompt et des divulgations de données.
- Vous savez guider des équipes dans la mise en place de traces, d’indicateurs, du suivi des versions et de procédures de contrôle en production.
Disponibilité et mobilité
Disponibilité
À convenir avec FormaGroup.
Mobilité
Mission dans la région Marrakech Safi, notamment à Marrakech, Safi et Essaouira. Les formations peuvent être animées en présentiel ou à distance, selon les modalités retenues pour la mission.
Compétences clés
Évaluation des réponses LLMConception de jeux de testsÉvaluation des systèmes RAGSécurité des applications LLMPrévention des injections de promptProtection des donnéesObservabilité en productionFormation d’adultes
Mots-clés de l’offre
#Applications LLM#Évaluation LLM#Sécurité des LLM#Jeux de tests#Systèmes RAG#Injection de prompt#Observabilité#Mise en production
Critères de l’annonce
- Secteur d’activité
- Informatique et intelligence artificielle
- Région
- Marrakech-Safi
- Travail à distance
- Hybride possible
- Type de contrat
- Mission indépendante (freelance)
- Disponibilité
- À convenir
- Niveau d’expérience
- Expérience entre 2 ans et 5 ans - Expérience entre 5 ans et 10 ans
- Niveau d’étude
- Bac+3 - Bac+5 et plus
- Langues
- Français
Vous souhaitez transmettre des méthodes concrètes pour tester, sécuriser et suivre des applications LLM ? Faites connaître votre intérêt pour cette mission auprès de FormaGroup.
Postuler maintenant