LLMTokenBase

単語数 ↔ トークン、双方向に即時変換。

どちらかの欄に入力すると、もう一方がすぐ更新されます。ブリーフの単語数だけ、またはモデルカードのトークン予算(32k、128k、100万)だけ分かっていて、まだ最終テキストがないときに便利です。実テキストの OpenAI、tiktoken、Claude、ChatGPT の長さはライブトークンカウンターを使ってください。

比率は近似です。英語ではおおよそ 1 トークンあたり ¾ 単語。実際のカウントはモデルと言語で異なります。実テキストは トークンカウンター に貼り付けて、より近い見積もりを確認してください。

一般的な長さ

コンテンツ単語≈ トークン
ツイート 1 件5067
短いメール200267
1 ページの brief500667
ブログ記事1,2001,600
長文記事3,0004,000

比率の仕組み

英語テキストはおおよそ 1 トークンあたり 4 文字、つまり ¾ 単語に 1 トークン程度です。この変換器はその単一比率を使うため、プランニング用のショートカットであり、実際のトークナイザーの代替ではありません。コード、記号の多いテキスト、非英語では大きく異なることがあります。 数え方の全文を読む →

このページ向きの用途

01

ドキュメントやブリーフの単語数しかなく、まだ最終テキストがない。

02

モデルカードに 32k、128k、100万トークンとあり、読み物の長さの感覚を得たい。

03

起草前にざっくりしたトークン予算、またはページ単位で考えるライター向けの単語見積もりが必要。

04

まず比率をざっと確認し、文字列ができたらライブカウンターで検証。

関連ツール

質問

英語の散文向けの粗い平均(約 0.75 語/トークン)です。実際のトークナイザーは異なります。コード、CJK、密集した句読点で大きく変わります。計画用の目安として使ってください。

あくまで見積もりです。OpenAI、Anthropic、Google の公式トークナイザーではありません。課金判断の前にプロバイダーで確認してください。