pbc的成长之路

摘要： 微调预训练模型 使用预训练模型有很多好处。预训练模型节省了你的计算开销、你的碳排放，并且让你能够使用sota模型而不需要自己从头训练。Hugging Face Transformers为你提供了上千种预训练模型，可广泛用于各种任务。当你使用一个预训练模型，你可以在任务特定数据集上训练。这就是著名的微 阅读全文

摘要： Preprocessing 在你可以将你的数据放入模型之前，数据需要处理成一个模型可以接受的形式。一个模型不能理解原始的文本、图像或音频。这些输入需要被转换成数字并组装成张量。在这篇教程当中，我们只介绍用分词器处理文本数据。 NLP 处理文本数据的主要工具是分词器。分词器一开始会根据若干规则将文本切 阅读全文