指南
用專題文章承接長尾搜尋:Token、tiktoken、各模型計數與換算。每篇都連結到可直接試用的工具。
- 什麼是 Token?AI 模型、API 與上下文視窗
Token 是 LLM 計量文字的單位,不是頁數也不是字數。了解它是什麼、與字數/字元的差異,以及在貼上前何時該用瀏覽器 Token 計數器。
- Tiktoken 與近似計數 - 瀏覽器能精確到哪一步
何時能貼近 OpenAI tiktoken 編碼(o200k、cl100k),何時 Claude / Gemini 只能近似。如何讀模式標註,以及何時應以 API 為準。
- OpenAI / ChatGPT / GPT Token 怎麼數
貼進 ChatGPT 或呼叫 GPT API 前先數長度:tiktoken 編碼、GPT-4 核對,以及聊天介面裡哪些開銷計數器看不到。
- Claude / Anthropic Token 計數(近似)說明
在瀏覽器裡估算 Claude 提示詞長度:為何沒有靜態 tiktoken 編碼、如何規劃上下文、何時以 Anthropic API 為準。
- Gemini Token 計數線上 - 「近似」是什麼意思
長篇貼進 Gemini 前先估 Token。為何沒有可嵌入網頁的官方編碼、本站如何標註不確定,以及何時以 Google AI Studio 為準。
- Python Tiktoken:編碼、GPT 長度與瀏覽器核對
Python tiktoken 做什麼、o200k_base / cl100k_base 如何對應 GPT 長度,以及何時用瀏覽器計數器在 IDE 外做快速核對。
- GPT-4o 上下文視窗、Max Tokens 與 128k 佔用
GPT-4o max tokens 與 128k 在實務裡怎麼用:佔用百分比、為回覆留空,以及模型截斷前如何核對長篇貼文。
- 字數與 Token 互轉 - 32k、128k、100萬怎麼估
字數 ↔ Token 規劃比例:200 Token、32k、128k、100萬 Token 約合多少字。固定比例的侷限,以及何時必須貼上真實文字計數。
- LLM / 線上 Token 計數器 - 本機計算、不上傳
好用的線上 LLM / AI Token 計數器該做什麼:本機計算、切換 OpenAI/Claude/Gemini 模式、標註近似——而不是一堆換皮關鍵字頁。