Zum Hauptinhalt springen

KI-Tokens zählen

KI-Token zählen misst Ihren Prompt mit dem exakten Tokenizer jedes Modells, berechnet, was ein API-Aufruf kosten würde, und zeigt, wie viel vom verfügbaren Kontext Sie verbrauchen würden. Die Zählung nutzt dieselbe Byte-Pair-Encoding-BPE, mit der der Anbieter abrechnet — und die ganze Rechnung passiert in Ihrem Browser: Ihr Text verlässt das Gerät nie.

Nur lokal

Zu analysierender Text

Lokal mit der echten Byte-Pair-Kodierung des Modells tokenisiert – Ihr Text verlässt diesen Browser nie.

Modell & Schätzung

Nur für die Kostenschätzung verwendet – schätzen Sie die Antwortlänge.

Zählungen

0
Tokens
0
Zeichen
0
Wörter
—
Zeichen / Token
Kontextfenster — GPT-4o0 von 128,000 Tokens
Kostenschätzung$0.0050
Eingabe
$0.00
Ausgabe
$0.0050

Listenpreise pro 1M Tokens; Anbieter ändern Preise – alle Angaben sind Schätzungen.

Token-Visualisierung

Geben Sie oben Text ein oder fügen Sie ihn ein, um zu sehen, wie das Modell ihn in Tokens aufteilt.

Wie funktioniert KI-Tokens zählen?

Sprachmodelle sehen nie Zeichen oder Wörter. Vor der Inferenz wandelt ein Tokenizer den Text in eine Folge von Ganzzahlen um — Token-IDs — aus einem festen Vokabular, das das Modell beim Training gelernt hat. Wörter zu zählen wäre für Menschen anschaulicher, aber nutzlos für Abrechnung und Kontextgrenzen, die über Tokens operieren.

Für die OpenAI-Familie ist dieses Tool abrechnungsgenau: Es führt js-tiktoken aus, einen JavaScript-Port von OpenAIs Referenz-Tokenizer mit denselben BPE-Rank-Tabellen, gegen die die API misst. Für Claude, Gemini und Llama nutzt es cl100k_base als nahe, klar gekennzeichnete Näherung: typischerweise wenige Prozent Abweichung, aber nicht rechnungsgenau.

Jedes Modell akzeptiert höchstens eine feste Anzahl Tokens pro Anfrage. Das Überschreiten wirft keinen Fehler: Die API kürzt stillschweigend am Anfang und verwirft zuerst Ihren ältesten Inhalt — oft genau die Systemanweisungen, der schlimmste mögliche Verlust. Die Kontextleiste wird ab 100% rot, damit Sie das sehen, bevor Sie für einen verschlechterten Aufruf zahlen.

Ihr Prompt

You are a helpful assistant. Summarize the meeting notes.

Zählung und Kosten

12 tokens · 48 characters · ~9 words (GPT-4o, o200k_base)

Welche Optionen und Sonderfälle unterstützt KI-Tokens zählen?

Technische Referenz und Optionen
ParameterTypStandardVerhalten & Sonderfälle
BPE-KodierungMethodeje ModellByte Pair Encoding: Beginnt mit einzelnen Bytes und verschmilzt die häufigsten Paare; das entstehende Vokabular bestimmt, wie jede Zeichenkette zerlegt wird.
ModellwahlSteuerungGPT-4oModell wählen, und der Zähler wechselt zu seinem Tokenizer, seinen Listenpreisen und seinem Kontextfenster.
KostenschätzungBerechnungnach PreislisteEingabe-Tokens mal Eingabepreis plus geschätzte Ausgabe mal Ausgabepreis, beide je Million Tokens.
KontextanzeigeIndikatorliveZeigt verbrauchte Tokens gegen das Modell-Limit; ab 100% rot, wenn die API stillschweigend kürzen würde.

Häufig gestellte Fragen

Was ist ein Token, und warum zählen Modelle keine Wörter?

Ein Token ist die atomare Einheit, die ein Modell liest und schreibt — typischerweise 3–4 Zeichen Englisch, manchmal ein ganzes häufiges Wort, manchmal ein einzelnes Byte eines Emojis. Abrechnung und Kontextgrenzen operieren über Tokens, nicht Wörter; Wörter zu zählen wäre also praktisch nutzlos. Die Faustregel — 1 Token ≈ ¾ eines Wortes — ist nur ein Durchschnitt.

Warum ergibt derselbe Text bei verschiedenen Modellen andere Zählungen?

Jede Modellfamilie bringt ihren eigenen Tokenizer mit eigenem Vokabular und eigenen Verschmelzungsregeln mit: GPT-4o nutzt o200k_base (~200 000 Tokens), GPT-4 und GPT-3.5 nutzen cl100k_base (~100 000), Claude nutzt Anthropics eigenen Tokenizer, Gemini nutzt Googles SentencePiece. Ein seltenes Wort in einem Vokabular zerfällt in einem anderen in mehr Teile.

Wie wird die API-Kostenschätzung berechnet?

Anbieter rechnen Eingabe-Tokens (Ihr Prompt) und Ausgabe-Tokens (die Antwort) getrennt ab, je Million Tokens. Die Schätzung multipliziert Ihre gemessenen Eingabe-Tokens mit dem Eingabepreis des Modells und die erwartete Ausgabelänge mit seinem Ausgabepreis. Preise ändern sich — jede Zahl hier ist als Schätzung gekennzeichnet.

Was passiert, wenn mein Text das Kontextfenster übersteigt?

Die API wirft keinen Fehler — sie kürzt stillschweigend. Modelle lesen die letzten Tokens, die ins Fenster passen, und verwerfen den Anfang Ihres Prompts, oft genau die Systemanweisungen. Die Leiste wird ab 100% rot, damit Sie das korrigieren, bevor Sie zahlen: Prompt kürzen, frühere Runden zusammenfassen oder ein Modell mit größerem Fenster wählen.

Werden meine Prompts zum Zählen an einen Server gesendet?

Nein. Die Tokenisierung ist Tabellen-Arithmetik, die in Ihrem Tab läuft: Zählung, Kosten und Kontextauslastung werden lokal berechnet, Ihr Text verlässt das Gerät nie. Das Network-Panel zeigt beim Tippen keine einzige Anfrage.

Warum kosten Emojis und nicht-englischer Text so viele Tokens?

Weil BPE-Vokabulare aus überwiegend englischen Korpora gelernt werden. Ein Emoji kann mehrere Tokens kosten, weil seine Bytes nie zu einem eigenen Eintrag verschmolzen wurden, und ein spanisches oder japanisches Wort zerfällt in mehr Teile als sein englisches Pendant. Je ungewöhnlicher der Text fürs Vokabular, desto teurer.