Dzzz

Token 计数器 本机运行

按模型统计 token 与费用——并说明阿拉伯语为何更贵。

模型 按以下方式计算 × 调用次数
输入 0 字符 · 0 词 · 0 行
输出

在左侧粘贴即可开始。

在上方粘贴即可开始。

tokens-gpt-4o.json

一切都在您的设备上运行。您粘贴的内容不会发送到任何地方,关闭标签页后即被清除。GPT 和 Llama 的精确分词器只需下载一次(约 3.5 MB),之后可离线使用。

粘贴文本,即可查看它占用多少 token,以及在各个模型上的费用。GPT 和 Llama 的计数使用真实的分词器,下载一次后保存在您的设备上;Claude 和 Gemini 没有公开的分词器,因此这些数字会标注为估算值。阿拉伯语与英语占比的拆分,说明了为什么同样的文本用阿拉伯语可能更贵。您粘贴的内容不会发送到任何地方。

关于本工具

你需要提供

  • 粘贴的文本,或从 .txt、.md、.json、.csv 或 .log 文件打开的文本,最大 2 MB。

你将获得

  • 所选各模型的 token 数量和费用,并按阿拉伯语、英语及其他文字拆分。
  • JSON 摘要;对于精确的分词器,还提供逐个 token。

使用限制

  • Claude 和 Gemini 的数量为估算值;它们没有公开的分词器。
  • 价格为带日期的快照,可能会变动。
  • 精确统计 GPT 和 Llama 需要一次性下载约 3 MB 的数据。

使用方法

  1. 粘贴文本

    粘贴到输入框中,或打开一个文本文件。

  2. 选择模型

    最多选择四个模型;每个模型都会标明精确或估算。

  3. 查看明细

    查看 token 数量、费用,以及文本占用各模型上下文的比例。

常见问题

为什么阿拉伯语比英语消耗更多 token?

大多数分词器主要基于英文文本构建,因此阿拉伯语单词会被拆成更多、更小的片段。同一句话用阿拉伯语表达,成本可能明显更高,而变音符号还会带来额外的 token。

统计结果准确吗?

GPT 和 Llama 模型使用的是真实的分词器,因此统计结果是精确的。Claude 和 Gemini 没有公开的分词器,所以它们的数字是估算值,并会标明。

我的文本会被上传吗?

不会。统计在您的设备上完成。唯一的下载内容是分词器数据,只下载一次,之后保存在本地供离线使用。