Glossaire de l’IA
Jeu de référence (golden set)
Un jeu de référence est un ensemble fixe d’entrées avec des bonnes réponses convenues, qui sert d’étalon pour noter une fonction d’IA.
Chaque cas associe une entrée à ce qu’une bonne sortie doit contenir, validé par des gens qui connaissent le domaine. C’est la partie « attendu » de chaque évaluation.
Un bon jeu contient les cas faciles, les cas limites délicats et de vrais exemples de production qui ont mal tourné.
Gardez-le à part de ce sur quoi vous ajustez. Si vous retouchez le prompt jusqu’à ce que le jeu passe, le score ne dit plus rien des nouvelles entrées.
L’apprendre par la pratique
Ces leçons gratuites l’enseignent avec des commandes à lancer dans un lab et des tâches corrigées. Elles se lisent en entier sans compte.