LLMTokenBase

So zählen wir Tokens

Modelle messen Text in Tokens, nicht in Seiten oder englischen Wörtern. Zwei Strings gleicher Länge im Editor können nach Tokenisierung von Satzzeichen, Code oder nicht-lateinischen Schriften stark abweichen. Diese Seite erklärt, wie LLM TokenBase Zählungen im Browser erzeugt und wo Zahlen exakt vs. ungefähr sind.

OpenAI- und tiktoken-Modi

Wenn verfügbar, nutzen OpenAI-orientierte Modi tiktoken-kompatible Kodierungen im Browser. Das ist die nächste öffentliche Annäherung an GPT-Familien-APIs.

Trotzdem können Chat-Wrapper, Tool-Aufrufe und Mehrfachnachrichten-Formatierung Tokens über den reinen Paste-Text hinaus hinzufügen. Behandeln Sie das Ergebnis als Planungshilfe.

Claude- und Gemini-Näherungen

Claude- und Gemini-Modi nutzen dokumentierte Näherungsregeln und markieren das Ergebnis als Schätzung. Diese Anbieter liefern nicht dieselbe browserfertige Kodierung für eine statische Seite.

Das ungefähre Badge ist beabsichtigt. Eine gekennzeichnete Schätzung ist nützlicher als stille falsch-präzise Angaben.

Wörter, Zeichen und Abrechnung

Zeichen sind die rohe Stringlänge. Wörter sind nur Leerzeichen-Aufteilung (Leerzeichen, Tabs, Zeilenumbrüche) – keine linguistische Segmentierung. Durchgehendes Chinesisch mit wenig Leerzeichen kann niedrige Wortzahl bei hoher Zeichenzahl zeigen; das ist erwartet. Diese Metriken helfen beim Gegencheck, sind aber meist nicht die API-Abrechnungseinheit.

Wenn Kosten zählen, beim Anbieter prüfen. Ein Zähler ist für Planung; die Rechnung für Buchhaltung. Diese Seite wird erweitert, sobald wir exakte WASM-Kodierungen pro Modellfamilie festlegen.

Modell-IDs und Kodierungen

Exakte Modi im Browser nutzen nur diese Encodings: o200k_base, cl100k_base. Model-IDs mit aktuellem Mapping: gpt-4o, gpt-4o-mini, gpt-4.1, gpt-4.1-mini, gpt-4, gpt-4-turbo, gpt-3.5-turbo, gpt-5, gpt-5-mini, o3, o3-mini, o4-mini. Beobachtete IDs ohne Browser-Encoding (nur in den Hinweisen; exakte Modusnamen bleiben encoding-basiert, z. B. „OpenAI (o200k)“, nicht Marketingnamen wie GPT-5.6): gpt-5.6, gpt-5.6-sol, gpt-5.6-terra, gpt-5.6-luna, gpt-5.4, gpt-5.4-mini.

Letzte Prüfung: 2026-07-12T06:24:47.112Z. Exakte Modi behalten Namen der Kodierungen, die wir ausliefern (z. B. „OpenAI (o200k)“). Neuere IDs wie gpt-5.6 erscheinen nur in Hinweisen, bis eine Browser-Kodierung existiert – wir benennen exakte Modus-Labels nicht in Marketing-Namen um.