En esta guía
Respuesta rápida: en inglés, un token equivale a unos 4 caracteres o 0,75 palabras. En español, el mismo contenido suele necesitar algo más de tokens. Pega tu texto en la calculadora de tokens para una estimación al instante.
La regla general
Los modelos de IA como GPT y Claude no leen palabras enteras: dividen el texto en fragmentos llamados tokens, que pueden ser una palabra, parte de una palabra o un símbolo. OpenAI publica una aproximación para el inglés: unos 4 caracteres por token, o unos 100 tokens por cada 75 palabras.
Palabras a tokens estimados
| Palabras | Tokens estimados |
|---|---|
| 100 | ≈ 133 |
| 250 | ≈ 333 |
| 500 | ≈ 667 |
| 1000 | ≈ 1333 |
| 1500 | ≈ 2000 |
| 2000 | ≈ 2667 |
| 5000 | ≈ 6667 |
| 10.000 | ≈ 13.333 |
Para estimar cualquier cantidad, divide las palabras entre 0,75, o multiplica por 1,33. En español, cuenta con que la cifra real puede ser algo mayor.
Por qué es solo una estimación
- Las palabras comunes en inglés suelen ser un solo token; las raras o largas se dividen en varios.
- Los tokenizadores se entrenan sobre todo con texto en inglés, así que el español suele necesitar más tokens para la misma idea.
- Los números, el código y la puntuación abundante usan más tokens por carácter.
- Cada proveedor usa su propio tokenizador.
Ventanas de contexto
La ventana de contexto es el total de tokens que un modelo puede manejar en una conversación, sumando lo que envías y lo que responde. Así se traducen los tamaños habituales, con la regla del inglés:
| Ventana de contexto | ≈ Palabras | ≈ Páginas (500 palabras) |
|---|---|---|
| 4000 tokens | 3000 | 6 |
| 8000 tokens | 6000 | 12 |
| 32.000 tokens | 24.000 | 48 |
| 128.000 tokens | 96.000 | 192 |
| 200.000 tokens | 150.000 | 300 |
| 1.000.000 tokens | 750.000 | 1500 |
Un ejemplo
Un artículo de 1500 palabras son unos 2000 tokens según la regla del inglés, una fracción pequeña incluso de una ventana de 8000 tokens. La longitud importa sobre todo cuando se acumulan conversaciones largas, documentos extensos o mucho código. El contador de palabras también muestra una estimación de tokens.
Prueba las calculadoras
Información general, no asesoramiento profesional.