Herramienta de Texto
Texto Solo local
Contador de tokens y calculadora de contexto LLM
Codificación de tiktoken locales perezososCuenta tokens, compara codificaciones, presupone mensajes y divide prompts con tiktoken local.
CodificaciónPrompt se mantiene localEl conteo de texto en bruto es exacto para la codificación seleccionada
Tokens
0Caracteres
0UTF-8 bytes
0Caracteres / token
—Texto fuente
El texto está codificado en este navegador después de las cargas seleccionadas de la tabla de rango.
Mapa token interactivo
Hover para index, token ID y UTF-8 decodificado; haga clic en un token para copiar su ID.
Ningún token coincide con este filtro.
| # | ID | Text | UTF-8 |
|---|
Cómo usarla
- 01
Tokenize el texto exacto
Elija o200k_base o cl100k_base e inspeccione localmente los ID de token, el texto visible y las representaciones UTF-8.
- 02
Planificar el presupuesto de contexto
Modelo de mensajes, esquema de herramientas, ventana de contexto, salida reservada y precios ilustrativos por millón.
- 03
Chunk y exportación
Crear trozos superpuestos de tokens y exportar filas de tokens o un informe de planificación atenuado.
Preguntas frecuentes
¿Son exactos los recuentos de texto crudo?
Son exactas para la codificación agrupada seleccionada. Un modelo de API en particular puede seleccionar una codificación diferente o añadir contenido específico del servicio.
¿Por qué se estima que el mensaje está etiquetado?
Los roles, envoltorios, herramientas y comportamiento de servicio varían según el modelo y la revisión de API; use el punto final de entrada del servidor como autoridad final cuando esté disponible.
¿Los costos mostrados son los precios actuales del modelo?
No se hace ninguna reclamación de precio fijo. Ambos campos por millón son entradas de planificación editables por el usuario y por defecto a cero.
¿Deja el contenido prompt el navegador?
No. Las filas de codificación se agrupan como activos estáticos perezosos y tokenización, comparación y troceado son locales.
Herramientas relacionadas
Continúa con otras utilidades web específicas.