2026年1月7日
hf tokenizer
摘要： Hugging Face Transformers 分词器核心类笔记 一、 核心类关系与定位 1. 继承关系 graph TD PreTrainedTokenizerBase --> PreTrainedTokenizer PreTrainedTokenizerBase --> PreTrained 阅读全文
posted @ 2026-01-07 16:21 玉米面手雷王 阅读(2) 评论(0) 推荐(0)