LLMTokenBase

我们怎么算 Token

模型按 Token 计量文本,既不是按页数,也不等于中英文词数。编辑器里看起来差不多长的两段文字,在切开标点、代码或非拉丁字符后,Token 数可能相差很大。本页说明 LLM TokenBase 如何在浏览器中计数,以及哪些结果更接近精确值、哪些属于近似。

OpenAI 与 tiktoken 模式

在可用时,OpenAI 相关模式会使用与 tiktoken 兼容的编码在浏览器中计数。这是目前公开渠道里,较接近 GPT 系 API 长度口径的做法。

即便如此,对话包装、工具调用、多轮消息仍可能让实际占用高于你粘贴的纯文本。请把结果当作规划参考。

Claude 与 Gemini 近似

Claude、Gemini 相关模式按公开近似规则估算,并标注为估计值。这两家没有提供可直接用于静态网页的同款浏览器编码。

「近似」标记是刻意保留的:带说明的估算,好过看起来很准却未标明误差。

词数、字符与计费

「字符」是原文长度。「词数」只按空白(空格、制表符、换行)分段,不是中文分词。中文连续输入、几乎没空格时,词数会偏少、字符仍可能很高,这是预期表现。二者便于编辑时交叉核对,但通常不是 API 计费单位。

涉及费用时,请向服务商核对。计数器用于规划,账单用于结算。各模型精确 WASM 编码确定后,本页会继续更新。

型号与编码核对

浏览器里的精确模式,只使用这些已支持的编码:o200k_base、cl100k_base。目前能对应到上述编码的常见型号:gpt-4o、gpt-4o-mini、gpt-4.1、gpt-4.1-mini、gpt-4、gpt-4-turbo、gpt-3.5-turbo、gpt-5、gpt-5-mini、o3、o3-mini、o4-mini。以下关注型号暂时还没有浏览器端编码(只写在说明里;精确模式仍按编码命名,例如「OpenAI(o200k)」,不会改成「GPT-5.6」这类营销名):gpt-5.6、gpt-5.6-sol、gpt-5.6-terra、gpt-5.6-luna、gpt-5.4、gpt-5.4-mini。

上次核对:2026-07-12T06:24:47.112Z。精确模式只按浏览器已支持的编码命名(例如「OpenAI(o200k)」),不会因为出现 gpt-5.6 这类新名字就改掉模式名称;尚无对应编码的型号,只写在说明里。