Saltar al contenido

Ventana de contexto

Número máximo de tokens que un modelo puede considerar a la vez; lo que queda fuera se trunca u olvida.

Los modelos actuales van desde unos 8K hasta más de un millón de tokens. Una ventana mayor permite pasar documentos o bases de código enteros, pero llenarla cuesta más y puede dispersar la atención del modelo: envía solo lo relevante.

Recursos relacionados