LLM-Token-Zähler & Kontext-Rechner
Lazy lokale tiktoken-kodierungenToken zählen, Encodings vergleichen, Nachrichtenbudget planen und Prompts mit lokalem tiktoken aufteilen.
Ausgangstext
Text wird in diesem Browser nach dem Laden der ausgewählten Rangtabelle kodiert.
Interaktive Token-Karte
Hover für Index, Token-ID und dekodiert UTF-8; klicken Sie auf ein Token, um seine ID zu kopieren.
Kein Token entspricht diesem Filter.
| # | ID | Text | UTF-8 |
|---|
So funktioniert es
- 01
Den genauen Text markieren
Wählen Sie o200k_base oder cl100k_base und inspizieren Sie Token-IDs, sichtbaren Text und UTF-8-Darstellungen lokal.
- 02
Planung des Kontextbudgets
Modellmeldungen, Tool-Schema, Kontextfenster, reservierte Ausgabe und illustrative per-million Preise.
- 03
Chunk und Export
Erstellen Sie tokengebundene überlappende Brocken und exportieren Sie Tokenzeilen oder einen abgeschwächten Planungsbericht.
Häufig gestellte Fragen
Sind Rohtext-Zahlen genau?
Sie sind exakt für die ausgewählte gebündelte Kodierung. Ein bestimmtes API-Modell kann eine andere Kodierung auswählen oder servicespezifische Inhalte hinzufügen.
Warum wird die Meldung Overhead angegeben?
Rollen, Wrapper, Tools und Serviceverhalten variieren je nach Modell und API-Revision; verwenden Sie den serverseitigen Input-Token-Endpunkt des Anbieters als endgültige Behörde, sofern verfügbar.
Sind die angezeigten Kosten aktuelle Modellpreise?
Es wird kein Festpreisanspruch erhoben. Beide pro Million Felder sind benutzer-editierbare Planungsinputs und Standardwert Null.
Verlassen prompte Inhalte den Browser?
Nein.Encoding Ranks werden gebündelt, da faule statische Assets und Tokenisierung, Vergleich und Chunking lokal sind.
Ähnliche Tools
Arbeiten Sie mit weiteren fokussierten Browser-Hilfsmitteln weiter.