KI-Glossar
Golden Set (Referenzsatz)
Ein Golden Set ist eine feste Sammlung von Eingaben mit vereinbarten guten Antworten, die als verlässlicher Maßstab für die Bewertung einer KI-Funktion dient.
Jeder Fall verbindet eine Eingabe mit dem, was eine richtige Ausgabe enthalten muss, abgestimmt von Leuten, die das Fachgebiet kennen. Er ist die „erwartete“ Hälfte jeder Evaluierung.
Gute Golden Sets enthalten leichte Fälle, knifflige Grenzfälle und echte Beispiele aus dem Betrieb, die einmal schiefgingen.
Halten Sie es getrennt von allem, woran Sie optimieren. Wer den Prompt so lange anpasst, bis das Golden Set besteht, erfährt aus dem Wert nichts mehr über neue Eingaben.
Praktisch lernen
Diese kostenlosen Lektionen lehren es mit Befehlen für ein Labor und geprüften Aufgaben. Ohne Konto vollständig lesbar.