Lewati ke isi

Glosarium

Token

Definisi ini dalam bahasa Inggris.

A chunk of text a model reads or writes. A token is not the same thing as a word.

Token · The AI Pin