Contenu de la formation
Les participants construisent une démarche d’évaluation adaptée à une application existante. Ils explorent les notions de pertinence, fidélité et qualité des réponses.
Cette session traite des traces, de la latence et des erreurs dans les workflows agentiques. Les stagiaires apprennent à interpréter les informations utiles au diagnostic.
La formation aide à définir des cas de test représentatifs et des critères de validation. Les participants structurent une première base de tests pour suivre les évolutions de leur solution.
Pour qui ?
- Ingénieurs IA
- Data scientists
- Développeurs LLM
- Responsables produit technique
Comment se déroule la formation
- 1Identification des risques et critères de qualité
- 2Constitution de cas de test représentatifs
- 3Mise en place d’indicateurs d’évaluation
- 4Lecture de traces, erreurs et temps de réponse
- 5Analyse collective des résultats
- 6Définition d’actions d’amélioration
Les formateurs de cette formation
Questions fréquentes
Faut-il déjà avoir une application LLM pour suivre cette formation ?
Une application existante facilite les mises en pratique, mais des exemples techniques peuvent aussi être utilisés. FormaGroup organise l’échange préalable avec le formateur.
Quels sujets d’observabilité sont abordés ?
La formation peut traiter les traces LLM, les erreurs, les appels d’outils, la latence et l’analyse des résultats selon le besoin.
La sécurité est-elle abordée ?
La formation traite les enjeux de contrôle et d’évaluation d’une application LLM dans le périmètre des cas étudiés avec le formateur.
Dans le catalogue FormaGroup
FormaGroup organise cette formation dans votre ville ou à distance : dates, groupe ou session individuelle, attestation de formation.
S’inscrire