Araçlar
Token Hesaplayıcı
Metnin yaklaşık kaç token tuttuğunu ve modelin bağlam penceresinin ne kadarını doldurduğunu gör.
Tokenizer:
Token
Karakter
Kelime
Satır
Bağlam penceresi kullanımı
/
(%)
⚠ Penceren neredeyse dolu. Bu modelde cevaba yer kalmayabilir.
Sayı tüm modellerde yaklaşıktır: karakter sayısından tahmin edilir (~3,6 karakter ≈ 1 token, ASCII dışı karakter oranı yüksekse %40'a kadar ek).