Tokens especiales que nunca ves
Parte de la sección Fundamentos del Journey de AI Prompts de Coddy. Lección 12 de 23.
Además de tu texto y del prompt del sistema, la IA usa tokens especiales: marcadores invisibles que estructuran la conversación. Se parecen a <|user|>, <|assistant|> o <|end|>, aunque el formato exacto varía según el modelo.
Estos tokens indican dónde empieza y termina cada mensaje y quién está hablando. Sin ellos, el modelo no sabría a quién le toca hablar. Nunca los escribes ni los ves, pero ocupan espacio en la ventana de contexto.
Por eso, incluso una conversación vacía no tiene cero tokens y el recuento de tokens a veces parece ligeramente superior a lo esperado. En las conversaciones largas de ida y vuelta, estos marcadores se acumulan: cada límite entre mensajes requiere su propio conjunto.
No necesitas gestionar directamente los tokens especiales. Pero saber que existen ayuda a explicar de dónde vienen esos tokens «adicionales».
Pruébalo tú mismo
Esta lección no incluye un desafío de código.
Esta lección incluye un breve cuestionario. Empieza la lección para responderlo y registrar tu progreso.
Todas las lecciones de Fundamentos
2Cómo te lee la IA: tokens
¿Qué son los tokens?Palabras ≠ tokensPor qué importa la cantidad de tokensLa ventana de contextoTokens en otros idiomasTokens especiales que nunca ves3Escribe tus primeros prompts
La IA habla Markdown (por defecto)Controlar el formato de salidaControlar el tono y el estiloCuando la IA te ignora