본문으로 바로 가기
kitlocal.dev

토크나이저 시각화

로컬에서 실행

100% 브라우저에서 처리됩니다. 입력과 출력이 기기 밖으로 나가지 않습니다.

AI 토크나이저별로 텍스트가 토큰으로 어떻게 나뉘는지 시각화합니다.