随笔分类 -  NLP

摘要:scratch:从头训练,随机初始化,不使用预训练参数 台大李宏毅老师机器学习2021 视频链接:https://pan.baidu.com/s/1VPwtRIWrYYdkLzEBD4D5cg 提取码:jetn 《BERT: Pre-training of Deep Bidirectional Tr 阅读全文
posted @ 2021-06-30 09:11 zhangzeff 阅读(324) 评论(0) 推荐(0)
摘要:做Softmax不是唯一的选项,做ReLu之类的结果也不会比较差,但是Softmax是用的最多的 CNN是self-attention的特例,论文:On the Relationship between Self-Attention and Convolutional Layers CNN和self 阅读全文
posted @ 2021-06-27 21:44 zhangzeff 阅读(735) 评论(0) 推荐(0)
摘要:论文地址:A Survey on Deep Learning for Named Entity Recognition 背景 什么是命名体识别 命名体识别(Named Entity Recognition, NER)是可以将一个单词或者短语可以清楚地从与它具有相似属性的项目中识别出来。例如一般领域中 阅读全文
posted @ 2021-06-13 20:04 zhangzeff 阅读(670) 评论(1) 推荐(0)
摘要:论文地址:More Data, More Relations, More Context and More Openness: A Review and Outlook for Relation Extraction 信息抽取(IE, Information Extraction)是从无结构文本中提 阅读全文
posted @ 2021-06-06 21:15 zhangzeff 阅读(766) 评论(0) 推荐(0)