Qu'est-ce qu'un token ?
Fait partie de la section Fondamentaux du Journey AI Prompts de Coddy. Leçon 7 sur 23.
L’IA décompose votre texte en éléments plus petits appelés tokens.
Considérez les tokens comme l’unité de base de lecture de l’IA. Tout comme vous pourriez découper une phrase en mots, l’IA découpe le texte en tokens.
Mais voici le piège : les tokens ne sont pas toujours des mots entiers. Un token peut être un mot, une partie d’un mot, ou même un seul caractère.
Par exemple, le mot hello constitue généralement un seul token. Mais un mot plus long comme uncomfortable peut être divisé en plusieurs tokens : un, comfort, able. L’IA traite chaque token séparément, l’un après l’autre.
Défi
Faites répondre l’IA avec au plus 4 mots, chaque mot ne comportant qu’une seule syllabe. La réponse doit constituer une pensée ou une affirmation complète.
La réponse de l’IA doit :
- Contenir 4 mots (ou moins)
- Ne contenir aucune ponctuation, à l’exception d’un seul point final
Testez-vousCette leçon comprend un petit quiz. Commencez la leçon pour y répondre et suivre votre progression.
Toutes les leçons de Fondamentaux
2Comment l'IA vous lit — Les Tokens
Qu'est-ce qu'un token ?Mots ≠ TokensPourquoi le nombre de tokens est importantLa fenêtre de contexteLes tokens dans d'autres languesLes tokens spéciaux que vous ne voyez jamais3Rédiger vos premiers prompts
L'IA parle Markdown (par défaut)Contrôler le format de sortieContrôler le ton et le styleQuand l'IA vous ignore