tokenize

Bonjour, vous êtes venu ici pour chercher la signification du mot tokenize. Dans DICTIOUS, vous trouverez non seulement toutes les significations du dictionnaire pour le mot tokenize, mais vous apprendrez également son étymologie, ses caractéristiques et comment dire tokenize au singulier et au pluriel. Tout ce que vous devez savoir sur le mot tokenize est ici. La définition du mot tokenize vous aidera à être plus précis et correct lorsque vous parlerez ou écrirez vos textes. Connaître la définition detokenize, ainsi que celles d'autres mots, enrichit votre vocabulaire et vous fournit des ressources linguistiques plus nombreuses et de meilleure qualité.

Étymologie

Dérivé de token, avec le suffixe -ize.

Verbe

Temps Forme
Infinitif to tokenize
\toʊ.kə.naɪz\
Présent simple,
3e pers. sing.
tokenizes
\toʊ.kə.naɪz.ɪz\
Prétérit tokenized
\toʊ.kə.naɪzd\
Participe passé tokenized
\toʊ.kə.naɪzd\
Participe présent tokenizing
\toʊ.kə.naɪz.ɪŋ\
voir conjugaison anglaise

tokenize

  1. (Informatique) Parser un texte composé de tokens.
    • Tokenizing is the process of converting a string into a list of substrings, known as tokens. — (Ben Stephenson, The Python Workbook (2nde édition), Springer, 2019, p. 90)
      La traduction en français de l’exemple manque. (Ajouter)

Variantes

Apparentés étymologiques

Références