Contador de tokens

Los tokens son las unidades básicas que los modelos de IA como GPT-4 y GPT-3.5 usan para procesar texto. Un token corresponde aproximadamente a 4 caracteres en inglés, o alrededor de ¾ de una palabra. Diferentes modelos usan diferentes tokenizadores; por ejemplo, GPT-4o usa la codificación o200k_base mientras que GPT-4 usa cl100k_base. Conocer el conteo de tokens de tus prompts te ayuda a mantenerte dentro de los límites del contexto del modelo y estimar los costos de la API.

1. Selecciona la codificación que coincida con tu modelo objetivo (por ejemplo, cl100k_base para GPT-4). 2. Escribe o pega el texto de tu prompt en el área de entrada. 3. El conteo de tokens se actualiza en tiempo real mientras escribes. 4. La herramienta también muestra el conteo de caracteres, palabras y líneas como referencia.