Glosario de IA
Fragmentación (chunking)
La fragmentación corta documentos largos en pasajes más pequeños antes de calcular sus embeddings, para que una búsqueda devuelva solo la parte que responde.
Un manual entero tiene un solo embedding que significa «todo», y no encaja bien con nada. Cortado en pasajes de unos cientos de tokens, cada fragmento puede encajar con su pregunta.
Se corta por tamaño, con algo de solapamiento para no separar una frase de su contexto, o por estructura: títulos, párrafos o funciones en el código.
Demasiado pequeño, el fragmento pierde el contexto que le da sentido; demasiado grande, mete ruido en el prompt. El tamaño se prueba, no se adivina.
Apréndelo con práctica
Estas lecciones gratuitas lo enseñan con órdenes para ejecutar en un laboratorio y tareas corregidas. Se leen completas sin cuenta.