Tokenlar Nedir?
Coddy'nin AI Prompts Journey'sinin Temeller bölümünün bir parçası — ders 7 / 23.
Yapay zeka, metninizi token adı verilen daha küçük parçalara böler.
Token'ları yapay zekanın temel okuma birimi olarak düşünün. Tıpkı sizin bir cümleyi kelimelere ayırmanız gibi, yapay zeka da metni token'lara ayırır.
Ama işin ilginç yanı şu: token'lar her zaman tam kelimeler değildir. Bir token; bir kelime, bir kelimenin parçası veya hatta sadece tek bir karakter olabilir.
Örneğin, hello kelimesi genellikle bir tokendır. Ancak uncomfortable gibi daha uzun bir kelime birden fazla tokene bölünebilir: un, comfort, able. Yapay zeka her bir tokeni birbiri ardına, ayrı ayrı işler.
Görev
Yapay zekanın, her kelimesi yalnızca tek heceli olan, tam olarak 4 kelime veya daha az kelimeyle yanıt vermesini sağlayın. Yanıt tam bir düşünce veya ifade olmalıdır.
Yapay zekanın yanıtı şunları içermelidir:
- 4 kelime (veya daha az) içermeli
- Sonunda tek bir nokta dışında hiçbir noktalama işareti içermemeli
Kopya kağıdı
Yapay zeka (AI), metni yapay zekanın temel okuma birimi olan token'lar adı verilen daha küçük parçalara böler.
Token'lar her zaman tam kelimeler değildir. Bir token şunlar olabilir:
- Tam bir kelime (örneğin,
hello) - Bir kelimenin parçası (örneğin,
uncomfortablekelimesiun,comfort,ableolarak bölünebilir) - Tek bir karakter
Yapay zeka her bir token'ı birbiri ardına ayrı ayrı işler.
Bu göreve Coddy'nin yapay zeka eğitmeniyle başla
Kendini test etBu ders kısa bir quiz içerir. Soruları yanıtlamak ve ilerlemeni kaydetmek için derse başla.
Temeller bölümündeki tüm dersler
2Yapay Zeka Sizi Nasıl Okur — Tokenlar
Tokenlar Nedir?Kelimeler ≠ TokenlarToken Sayıları Neden Önemlidir?Bağlam PenceresiDiğer Dillerde TokenlarHiç Görmediğiniz Özel Tokenlar