标签: Tokenizer

包含此标签的文章 "Tokenizer".

• Token 是怎么计算的

  2026 年 11 月 11 日

  从文言文是否更省 Token 的问题出发，梳理 Tokenizer、BPE、实际计数方法，以及 Prompt Cache 与 KV Cache 的区别。