単語数とトークンの相互変換 - 32k、128k、100万

words to tokens、tokens to words、200 / 32000 / 128k / 1 million tokens to words などのロングテールは、計画用の換算です。最終文字列の前に、数字（単語数またはトークン予算）だけを持っている状態です。

双方向が存在する理由

ライターは単語で考え、モデルカードはトークンで見積もります。単語→トークンはブリーフをトークン形状の予算に変換します。トークン→単語は32k / 128k / 1Mの予算をおおよその読み取り長に戻します。両方とも固定の英語計画比率（約0.75単語/トークン）を使用します。コードとCJKでは偏ります。

プリセットの目的

200トークン、32k、128k、1Mのプリセットは入力を省き、一般的なロングテール検索に対応します。カスタム数値より正確というわけではなく、モデルカード規模に素早く合わせるためです。

換算は貼り付けの代わりにならない

実際のプロンプトがある場合はトークンカウンターを使います。換算ツールは「およそ」に、カウンターは「この文字列」に答えます。課金は引き続きプロバイダーAPIに従います。

コンテキストウィンドウツールと組み合わせる

直感のために換算し、下書きをコンテキストウィンドウ計算機に貼り付けて128kなどに対する埋め率を確認します。数字で計画し、貼り付けで送信します。

CJKの注意

スペースのない中国語は「単語」カウントを壊します。文字数とトークンを優先するか、最終稿を貼り付けてください。単語換算だけを信頼しないでください。