Carte Super rare

Token (intelligence artificielle)

Valeur

200 W

Attaque

322

Défense

257

Joueurs

0

1 646 vues Wikipédia ces 30 derniers jours

Un token (ou jeton) est, dans le domaine de l'intelligence artificielle et du traitement automatique du langage naturel (TALN), la plus petite unité textuelle et conceptuelle indivisible isolée par un « algorithme de segmentation » (ou tokenizer) afin de transformer un texte brut (ou une image, ou…