Module gratuit
Évaluer les systèmes d’IA en profondeur
Apprenez à évaluer les systèmes d’IA en pratique : jeux de référence, tests de régression, biais d’un juge, taux d’hallucination et recherche.
Les leçons
Chaque leçon se lit gratuitement en entier. Créez un compte gratuit pour lancer ses commandes dans un laboratoire et passer ses quiz et ses exercices.
1 · Labo de conteneurs
Un jeu d’évaluation est-il assez bon ?
Je peux dire si un jeu d’évaluation est assez bon pour qu’on s’y fie.
Lire la leçon2 · Labo de conteneurs
Faire échouer la chaîne sur une mauvaise consigne
Je peux faire échouer une chaîne de contrôle sur une consigne plus faible.
Lire la leçon3 · Labo de conteneurs
Comment un juge peut être biaisé
Je peux découvrir comment un correcteur est biaisé avant de m’y fier.
Lire la leçon4 · Labo de conteneurs
Mesurer un taux d’hallucination
Je peux mesurer à quelle fréquence une réponse dit ce que sa source ne dit pas.
Lire la leçon5 · Labo de conteneurs
Noter la recherche à part de la réponse
Je peux noter la recherche à part de la réponse.
Lire la leçon6 · Labo de conteneurs
Fabriquer des cas d’évaluation synthétiques
Je peux fabriquer de nouveaux cas à partir d’une graine et dire qu’ils ne sont pas des copies.
Lire la leçon
Travaillé dans un vrai laboratoire
Chaque leçon de ce module se travaille dans un laboratoire lancé pour vous seul. Les laboratoires utilisés :
Vous enseignez à une classe ? Proposez ce module à vos étudiants avec un guide de l'enseignant, des devoirs corrigés et un laboratoire pour chaque étudiant.