TokenSave
Numărător de tokeni AI
Numără tokenii, caracterele și costul API în timp real — în orice limbă.
Pentru același text, româna folosește cam 1.53× tokenii din engleză (măsurat pe tokenizatorul o200k al GPT).
Ce este un token?
Un token este o bucată de text pe care o citește un model AI. În engleză, 1 token înseamnă aproximativ 4 caractere sau ¾ dintr-un cuvânt.
De ce costă mai mult alte limbi?
Tokenizatoarele sunt antrenate mai ales pe engleză, așa că româna, coreeana, japoneza și multe alte limbi se împart în mai mulți tokeni pentru același sens.
Textul meu rămâne privat?
Da. Totul rulează local, în browserul tău. Textul nu este trimis niciodată către vreun server.
Câți tokeni în plus folosește româna față de engleză?
Pe tokenizatorul o200k al GPT, româna folosește cam 1.53× tokenii aceluiași text în engleză. Vechiul tokenizator GPT-4 avea nevoie de 1.76×; în cele 41 de limbi măsurate, raportul variază de la 1.03× (chineza simplificată) la 2.44× (punjabi).