Token

Hvad er Token?

Den enhed, sprogmodeller tæller tekst i. Et token svarer omtrent til en del af et ord; AI-omkostninger beregnes ud fra det.