Módulo gratuito
Evaluar sistemas de IA en profundidad
Aprende a evaluar sistemas de IA en la práctica: conjuntos de referencia, control de regresión, sesgos de un juez, alucinaciones y búsqueda.
Las lecciones
Cada lección se lee completa y gratis. Crea una cuenta gratuita para ejecutar sus comandos en un laboratorio y hacer sus cuestionarios y tareas.
1 · Laboratorio de contenedores
¿Es bueno tu conjunto de evaluación?
Puedo decir si un conjunto de evaluación es lo bastante bueno para fiarme de él.
Leer la lección2 · Laboratorio de contenedores
Haz que una instrucción peor falle el control
Puedo hacer que una instrucción peor falle un control automático.
Leer la lección3 · Laboratorio de contenedores
Cómo puede estar sesgado un juez
Puedo averiguar cómo está sesgado un calificador antes de apoyarme en él.
Leer la lección4 · Laboratorio de contenedores
Medir una tasa de alucinaciones
Puedo medir con qué frecuencia una respuesta dice lo que su fuente no dice.
Leer la lección5 · Laboratorio de contenedores
Puntuar la búsqueda aparte de la respuesta
Puedo puntuar la búsqueda aparte de la respuesta.
Leer la lección6 · Laboratorio de contenedores
Crear casos de evaluación sintéticos
Puedo crear casos nuevos a partir de una semilla y decir que no son copias.
Leer la lección
Con un laboratorio real
Cada lección de este módulo se practica en un laboratorio que se inicia solo para ti. Los laboratorios que usa:
¿Enseñas a una clase? Asigna este módulo a tus alumnos con guía del profesor, tareas con corrección automática y un laboratorio para cada alumno.