TokenSave
Μετρητής tokens AI
Μετρήστε tokens, χαρακτήρες και κόστος API σε πραγματικό χρόνο — σε κάθε γλώσσα.
Για το ίδιο κείμενο, τα ελληνικά χρειάζονται περίπου 2.06× τα tokens των αγγλικών — μία από τις ακριβότερες ανάμεσα σε 41 γλώσσες (μέτρηση στον tokenizer o200k του GPT).
Τι είναι ένα token;
Ένα token είναι ένα κομμάτι κειμένου που διαβάζει ένα μοντέλο AI. Στα αγγλικά, 1 token αντιστοιχεί περίπου σε 4 χαρακτήρες ή ¾ μιας λέξης.
Γιατί οι άλλες γλώσσες κοστίζουν περισσότερο;
Οι tokenizers εκπαιδεύονται κυρίως σε αγγλικά, οπότε τα ελληνικά, τα κορεατικά, τα ιαπωνικά και πολλές άλλες γλώσσες σπάνε σε περισσότερα tokens για το ίδιο νόημα.
Είναι ιδιωτικό το κείμενό μου;
Ναι. Όλα εκτελούνται τοπικά στον browser σας. Το κείμενό σας δεν αποστέλλεται ποτέ σε κάποιον server.
Πόσα περισσότερα tokens χρειάζονται τα ελληνικά από τα αγγλικά;
Στον tokenizer o200k του GPT, τα ελληνικά χρειάζονται περίπου 2.06× τα tokens του ίδιου κειμένου στα αγγλικά — το δεύτερο υψηλότερο ποσοστό από τις 41 γλώσσες που μετρήσαμε, μετά τα παντζάμπι (2.44×). Ο παλιός tokenizer του GPT-4 χρειαζόταν 4.94×, οπότε το κόστος έπεσε κάτω από το μισό.