Visualisateur de Tokens
Comprendre comment les LLM "voient" le texte.
Saisissez votre texte :
L'intelligence artificielle comprend le monde par morceaux.
Tokeniser
Effacer
Caractères
0
Tokens
0
Ratio (Char/Token)
0
Le résultat apparaîtra ici...
Détails du Token
Texte :
Token ID :