Op welk taalniveau hoort token?

Het woord token hoort bij taalniveau C1 volgens het Europees Referentiekader (CEFR).

Is token een de-woord of het-woord?

Token is een het-woord: het token.

Was dit nuttig?

zelfstandig naamwoord | Taalniveau: C1

de kleinste eenheid van tekst die een taalmodel verwerkt, zoals een woord of lettergreep

"Een gemiddeld woord bestaat uit circa 1.3 tokens in een taalmodel."
"Het maximale aantal tokens dat het model tegelijk kan verwerken heet het contextvenster."

Wat betekent token?: de kleinste eenheid van tekst die een taalmodel verwerkt, zoals een woord of lettergreep
Op welk taalniveau hoort token?: Het woord token hoort bij taalniveau C1 volgens het Europees Referentiekader (CEFR).
Is token een de-woord of het-woord?: Token is een het-woord: het token.