Ir para o conteúdo principal
kitlocal.dev

Visualizador de Tokenizer

Roda localmente

100% processado no seu navegador. Entradas e saídas nunca saem do seu dispositivo.

Veja como o texto é dividido em tokens por diferentes tokenizers de IA.