随笔分类 -  NLP自然语言处理相关

一个关于自然语言处理技术相关的随笔分类
摘要:Masked Language Modeling (掩码语言建模) 任务目的是解码句子中的[MASK]。简单来说,就是完型填空。 以下代码将演示如何使用前 10 个候选词来替换 [MASK],而非仅仅取最佳候选词。 Code: from transformers import BertTokeniz 阅读全文
posted @ 2022-05-15 19:08 AlsoRan 阅读(823) 评论(0) 推荐(0)
摘要:废话不多说直接上代码 import re caps = "([A-Z])" prefixes = "(Mr|St|Mrs|Ms|Dr)[.]" suffixes = "(Inc|Ltd|Jr|Sr|Co)" starters = "(Mr|Mrs|Ms|Dr|He\s|She\s|It\s|They 阅读全文
posted @ 2022-04-26 13:34 AlsoRan 阅读(77) 评论(0) 推荐(0)
摘要:直接甩链接了,等自己不那么懒了,好好理一理。 链接:http://www.ruanyifeng.com/blog/2013/03/cosine_similarity.html 阅读全文
posted @ 2022-01-02 18:55 AlsoRan 阅读(40) 评论(0) 推荐(0)
摘要:转载自CSDN大佬CodeJT 直接看把:https://blog.csdn.net/sdu_hao/article/details/95958293 阅读全文
posted @ 2022-01-02 14:29 AlsoRan 阅读(84) 评论(0) 推荐(0)