Contatore token

I token sono le unità di base che i modelli di intelligenza artificiale come GPT-4 e GPT-3.5 utilizzano per elaborare il testo. Un token corrisponde approssimativamente a 4 caratteri in inglese, o circa ¾ di una parola. Modelli diversi utilizzano tokenizzatori diversi: ad esempio, GPT-4o utilizza la codifica o200k_base mentre GPT-4 utilizza cl100k_base. Conoscere il numero di token dei tuoi prompt ti aiuta a rimanere entro i limiti del contesto del modello e a stimare i costi dell'API.

1. Seleziona la codifica che corrisponde al tuo modello target (es. cl100k_base per GPT-4). 2. Digita o incolla il testo del tuo prompt nell'area di input. 3. Il conteggio dei token si aggiorna in tempo reale mentre digiti. 4. Lo strumento mostra anche il conteggio dei caratteri, delle parole e delle righe come riferimento.