Die erste Version einer KI-Funktion bauen

Die erste Version einer KI-Funktion

Die erste Version einer KI-Funktion ist die einfachste, die Sie messen können. Sie hat einen Prompt, ein Modell und eine kleine Menge Testfragen. Sie zählt, weil man nicht verbessern kann, was man nicht bewertet.

Die Stadtbibliothek Lindenhof hat jetzt ihren Auftrag. Das Team baut einen Assistenten, der aus einem Blatt mit neun Zeilen antwortet, und bewertet ihn an zehn Fragen.

Am Ende dieser Lektion

Notiz

Ich kann die einfachste Version bauen, die sich messen lässt.

Schlüsselwörter

Begriff	Was er bedeutet	Beispiel
Faktenblatt	die kurze Liste der Fakten, die der Assistent nutzen darf
Testfall	eine Frage mit der Zahl, die die Antwort enthalten muss	c4
Auswertung	Testfälle und eine Regel, die jeden bewertet
Prüfung	die Regel, die eine Antwort mit bestanden oder nicht bewertet
Ausgangswert	das erste Ergebnis, das spätere Versionen schlagen

Die Zellen, die Lernende ausfüllen, bleiben in dieser Vorschau leer.

Ein Prompt, ein Modell, ein Blatt

Die einfachste Version hat vier Teile. Einen System-Prompt mit einer Regel. Ein Faktenblatt darin. Ein Modell. Eine Prüfung der Antwort.

Sie hat keine Suche, kein Gedächtnis und kein zweites Modell. Jeder fehlende Teil kann noch nicht versagen. Sie fügen einen erst hinzu, wenn ein Ergebnis es verlangt.

Beispiel: Version 1

Teil	In der ersten Version
Prompt	In einem kurzen Satz antworten
Faktenblatt	Neun Fakten, in den Prompt kopiert
Modell	Eines, von der Plattform gewählt
Prüfung	Die richtige Zahl, keine andere, 40 Wörter

Die Zellen, die Lernende ausfüllen, bleiben in dieser Vorschau leer.

Eine Auswertung: Fälle und eine Regel

Ein Testfall ist eine Frage und die Zahl, die die Antwort enthalten muss. Die Prüfung bewertet jede Antwort mit derselben Regel.

Die Prüfung findet hier vier Arten von Fehlern. Eine Ablehnung. Eine erfundene Zahl, die nicht auf dem Blatt steht. Eine vage Antwort ohne die richtige Zahl. Eine zu lange Antwort über 40 Wörtern.

Beginnen Sie mit zehn Fällen

Zehn Fälle sind absichtlich wenig. Sie können jede Antwort lesen und sehen, warum jede scheitert.

Die Fälle stammen aus dem, was Leute fragen, nicht aus dem, was leicht ist. Taucht später ein echter Fehler auf, fügen Sie ihn als Fall 11 hinzu. Die Auswertung wächst mit den Belegen.

Ein häufiger Fehler

Warnung

Viele glauben, eine gute Vorführung sei eine Auswertung. Eine Vorführung ist ein Fall, den Sie gewählt haben. Eine Auswertung sind viele Fälle, die Sie nicht gewählt haben, mit derselben Regel bewertet. Eine Vorführung zeigt, was funktionieren kann. Eine Auswertung zeigt, wie oft es funktioniert.