Tiktoken 與近似計數 - 瀏覽器能精確到哪一步
最近更新:July 2026
何時能貼近 OpenAI tiktoken 編碼(o200k、cl100k),何時 Claude / Gemini 只能近似。如何讀模式標註,以及何時應以 API 為準。
不是每家廠商都會提供一份能直接放進靜態網頁的瀏覽器分詞器。LLM TokenBase 對此說清楚:有的模式盡量貼近精確編碼,有的只能做近似,並會明確標註。
Tiktoken 類模式能做什麼
面向 OpenAI 工作流程時,只要瀏覽器裡有對應資源,我們會使用 o200k_base、cl100k_base 這類編碼。這是目前公開管道裡,較接近 GPT 系 API 長度口徑的做法。請打開 Token 計數器,切換到 OpenAI 系模式來核對。
不是每家都能做到同樣精確
Anthropic 和 Google 沒有同等的靜態頁編碼可直接嵌入。仍在同一計數器裡提供 Claude、Gemini 的實用估算,方便你規劃提示詞——「近似」標記會一直保留。細節見 Claude / Gemini 專題指南。
怎麼讀模式名稱
精確模式按實際提供的編碼命名(例如「OpenAI (o200k)」),不會拿行銷型號亂貼。暫時沒有瀏覽器對應的新 ID,會寫在 計數說明裡。聊天封裝、工具呼叫、多輪格式仍可能讓真實用量偏離本頁數字。
關鍵時以 API 為準
規劃用計數可以在本站完成;硬上限和帳單請以服務商控制台為準。