Comprendi e conteggia i token


Gemini e altri modelli di IA generativa elaborano input e output con una granularità chiamata token.

Informazioni sui token

I token possono essere singoli caratteri come z o intere parole come cat. Le parole lunghe vengono suddivise in più token. L'insieme di tutti i token utilizzati dal modello è chiamato vocabolario e il processo di suddivisione del testo in token è chiamato tokenizzazione.

Per i modelli Gemini, un token equivale a circa 4 caratteri. 100 token equivalgono a circa 60-80 parole in inglese.

Quando la fatturazione è attivata, il costo di una chiamata all'API Gemini è determinato in parte dal numero di token di input e di output, quindi sapere come conteggiare i token può essere utile.