Token sayacı Cihazda
Model başına token ve maliyet — ve Arapçanın neden daha pahalı olduğu.
Başlamak için soldaki alana yapıştırın.
Başlamak için yukarıya yapıştırın.
Her şey cihazınızda çalışır. Yapıştırdığınız hiçbir şey herhangi bir yere gönderilmez ve sekmeyi kapattığınızda temizlenir.Kesin GPT ve Llama tokenizer'ları bir kez indirilir (yaklaşık 3,5 MB) ve çevrimdışı saklanır.
Metni yapıştırın; kaç token kullandığını ve her modelde ne kadar tutacağını görün. GPT ve Llama sayımları gerçek tokenizer'ları kullanır; bunlar bir kez indirilir ve cihazınızda saklanır. Claude ve Gemini için yayımlanmış bir tokenizer olmadığından bu rakamlar tahmin olarak etiketlenir. Arapça ve İngilizce dağılımı, aynı metnin Arapçada neden daha pahalı olabildiğini gösterir. Yapıştırdığınız hiçbir şey herhangi bir yere gönderilmez.
Bu araç hakkında
Sizin sağlayacağınız
- Yapıştırılan metin veya 2 MB'a kadar .txt, .md, .json, .csv ya da .log dosyasından açılan metin.
Elde edeceğiniz
- Seçilen model başına token sayısı ve maliyet; Arapça, İngilizce ve diğer yazı sistemlerine göre döküm.
- Bir JSON özeti ve kesin tokenizer'larda tek tek token'lar.
Sınırlar
- Claude ve Gemini sayımları tahminidir; bunlar için yayımlanmış tokenizer yoktur.
- Fiyatlar tarihli bir anlık görüntüdür ve değişebilir.
- Kesin GPT ve Llama sayımı, yaklaşık 3 MB'lık tek seferlik bir indirme gerektirir.
Nasıl kullanılır
-
Metninizi yapıştırın
Girdi kutusuna yapıştırın veya bir metin dosyası açın.
-
Modelleri seçin
En fazla dört model seçin; her biri Kesin veya Tahmin olarak gösterilir.
-
Dökümü okuyun
Token'ları, maliyeti ve metnin her modelin bağlamının ne kadarını doldurduğunu görün.
Sık sorulan sorular
Arapça neden İngilizceden daha fazla token kullanır?
Çoğu tokenizer ağırlıklı olarak İngilizce metinle geliştirildiği için Arapça sözcükler daha fazla ve daha küçük parçaya bölünür. Aynı cümle Arapçada belirgin biçimde daha pahalıya gelebilir; harekeler ise ek token ekler.
Sayımlar kesin mi?
GPT ve Llama modellerinde gerçek tokenizer kullanıldığı için sayımlar kesindir. Claude ve Gemini için yayımlanmış bir tokenizer yoktur; bu nedenle rakamları tahminidir ve öyle işaretlenir.
Metnim karşıya yükleniyor mu?
Hayır. Sayım cihazınızda yapılır. Tek indirme tokenizer verisidir; bir kez alınır ve çevrimdışı kullanım için saklanır.