什麼是 Token？AI 模型、API 與上下文視窗

大型語言模型並不按「頁數」或英文詞數計量文字。它們會把字串切成 Token——可能是整個詞、詞的一部分、標點、空格，或一段程式碼。編輯器裡看起來差不多長的兩段提示詞，切完之後 Token 數可能差很多。

詞數、字元、Token 各管什麼

字元是原文長度。詞數在本站只按空白分段，不是中文分詞——連續中文常會「詞數很低、字元很高」。Token 才是多數 API 帳單與上下文視窗用的單位。程式碼很密、語言混雜、或 Unicode 特殊時，三者比例會明顯分叉。

為什麼計費和截斷都看 Token

服務商按 Token 計價和截斷，是因為模型詞表本來就按這種方式工作。如果只看字元數，長貼上可能在請求失敗、或模型「忘掉」早先輪次時才讓你吃驚。

什麼時候該打開計數器

在觸及上下文上限、往 ChatGPT 塞長文、或發起偏大的 API 請求前，先用 Token 計數器。GPT 系列優先看 OpenAI / tiktoken 模式；Claude、Gemini 請當作帶標註的估算。只有詞數 brief 時用 詞數轉 Token；要看視窗佔用百分比，用 上下文視窗計算機。

和「線上 Token 計數器」是什麼關係

人們搜 AI token counter、LLM token counter、online token counter，要的通常是同一件事：貼上即看長度。本站用一個工作台覆蓋這些意圖，而不是拆一堆換皮頁。更細的廠商差異見下面各篇指南。