Token
Un token è un'unità di testo che un modello di IA legge o genera: può essere una parola, parte di una parola o un segno di punteggiatura.
Esempio pratico
Se chiedi a un chatbot di riassumere un articolo, sia il testo che invii sia la risposta sono suddivisi in token. Il loro numero può incidere sui limiti di utilizzo e sul costo.