2020年8月25日
预训练模型（四）---Ernie
摘要： 首先，Ernie是百度搞出来的预训练语言模型，目前分为Ernie1.0和Ernie2.0. 一. Ernie 1.0 Ernie和Bert有什么异同呢？ 1.Ernie：通过实体和短语mask能够学习语法和句法信息的语言模型 2.训练方法：与bert类似 3.训练数据集：Bert在中文数据集上只用到 阅读全文
posted @ 2020-08-25 14:08 hello！元卜 阅读(569) 评论(0) 推荐(0)