Vai al contenuto principale
kitlocal.dev

Visualizzatore tokenizer

Esecuzione locale

Elaborazione al 100% nel tuo browser. Input e output non lasciano mai il tuo dispositivo.

Visualizza come il testo viene suddiviso in token dai diversi tokenizer di IA.