Módulo gratuito
Evaluaciones y pruebas de funciones con modelos
Aprende evals de modelos con práctica: conjuntos de referencia, reglas de puntuación, regresiones, un modelo juez y una puerta que frena cambios malos.
Las lecciones
Cada lección se lee completa y gratis. Crea una cuenta gratuita para ejecutar sus comandos en un laboratorio y hacer sus cuestionarios y tareas.
1 · Laboratorio de contenedores
Cómo crear un conjunto de referencia
Puedo crear un conjunto pequeño de casos con respuestas buenas conocidas.
Leer la lección2 · Laboratorio de contenedores
Cómo puntuar respuestas con reglas
Puedo puntuar una respuesta con reglas que no necesitan un modelo.
Leer la lección3 · Laboratorio de contenedores
Cómo detectar una regresión en un modelo
Puedo comparar dos versiones sobre los mismos casos y decidir si una es peor.
Leer la lección4 · Laboratorio de contenedores
Cómo usar un modelo como juez
Puedo pedir a un modelo que puntúe una respuesta y mantener esa puntuación comprobable.
Leer la lección5 · Laboratorio de contenedores
Cómo probar un juez LLM con personas
Puedo probar un juez contra notas dadas por una persona.
Leer la lección6 · Laboratorio de contenedores
Cómo crear una suite de evaluación
Puedo reunir casos, puntuación, comparación y una puerta en una sola suite.
Leer la lección
Con un laboratorio real
Cada lección de este módulo se practica en un laboratorio que se inicia solo para ti. Los laboratorios que usa:
¿Enseñas a una clase? Asigna este módulo a tus alumnos con guía del profesor, tareas con corrección automática y un laboratorio para cada alumno.