Boîte à Outils Texte
Texte Local uniquement
Compteur de jetons LLM et calculateur de contexte
Encodages locaux paresseux tiktokenComptez les jetons, comparez les encodages, budgétez les messages et divisez les invites avec tiktoken local.
CodageDes séjours rapides sur placeLe nombre de texte brut est exact pour le codage sélectionné
Jetons
0Personnages
0UTF-8 octets
0Caractères / jeton
—Texte source
Le texte est encodé dans ce navigateur après les charges de la table de classement sélectionnée.
Carte en jeton interactive
Hover pour index, jeton ID et décodé UTF-8; cliquez sur un jeton pour copier son ID.
Aucun jeton ne correspond à ce filtre.
| # | ID | Text | UTF-8 |
|---|
Mode d’emploi
- 01
Tokenize le texte exact
Choisissez o200k_base ou cl100k_base et inspectez localement les identifiants de jeton, le texte visible et les représentations UTF-8.
- 02
Planifier le budget-cadre
Modèles de messages, schéma d'outils, fenêtre contextuelle, sortie réservée et prix indicatifs par million.
- 03
Choux et exportations
Créer des morceaux recoupant des jetons et exporter des rangées de jetons ou un rapport de planification entaché.
Questions fréquentes
Le nombre de textes bruts est-il exact?
Ils sont exacts pour l'encodage groupé sélectionné. Un modèle d'API particulier peut sélectionner un codage différent ou ajouter un contenu spécifique au service.
Pourquoi le message est-il indiqué sur l'étiquette?
Les rôles, les enveloppes, les outils et le comportement de service varient selon le modèle et la révision de l'API; utiliser le paramètre d'entrée côté serveur du fournisseur comme autorité finale lorsque disponible.
Les coûts affichés sont-ils les prix du modèle courant?
Aucune réclamation à prix fixe n'est faite. Les deux champs par million sont des entrées de planification editables par l'utilisateur et par défaut à zéro.
Le contenu rapide quitte-t-il le navigateur ?
Non. Les rangs d'encodage sont groupés comme des actifs statiques paresseux et la tokenisation, la comparaison et le brouillage sont locaux.
Outils associés
Poursuivez avec d’autres utilitaires web ciblés.