跳转到主要内容
kitlocal.dev

分词器可视化

本地运行

100% 在你的浏览器中处理。输入和输出绝不会离开你的设备。

可视化不同 AI 分词器如何将文本拆分为 Token。