摘要:1.return torch.embedding(weight, input, padding_idx, scale_grad_by_freq, sparse)RuntimeError: Expected tensor for argument #1 'indices' to have scalar 阅读全文
posted @ 2021-02-27 18:30 最咸的鱼 阅读(9) 评论(0) 推荐(0) 编辑
摘要:使用torchtext的一般步骤https://www.cnblogs.com/cxq1126/p/13466998.html#_label9 1.使用torchtext默认支持的预训练词向量 默认情况下,会自动下载对应的预训练词向量文件到当前文件夹下的.vector_cache目录下,.vecto 阅读全文
posted @ 2021-02-09 11:43 最咸的鱼 阅读(95) 评论(0) 推荐(0) 编辑
摘要:期末考终于结束了~补下复习之前没来得及记录的问题。 用google-research官方的bert源码(tensorflow版本)对新的法律语料进行微调,迭代次数为100000次,每隔1000次保存一下模型,得到的结果如下: 将最后三个文件取出,改名为bert_model.ckpt.data-000 阅读全文
posted @ 2021-01-18 14:11 最咸的鱼 阅读(188) 评论(0) 推荐(0) 编辑
摘要:1.中文语料常常遇到编码问题,将任意字符集文件转为utf-8编码 1 import chardet 2 import codecs 3 from django.utils.encoding import smart_text 4 5 def check_file_charset(file): #查看 阅读全文
posted @ 2020-12-07 15:41 最咸的鱼 阅读(88) 评论(0) 推荐(0) 编辑
摘要:数据集的格式如下: datasets train文件夹(WA和WKY文件夹,里面分别存放了200张图片) test文件夹(WA和WKY文件夹,里面分别存放了100张图片) 每一张图片都有自己的文件名,train中WA的图片标签为0,WKY的图片标签为1。 1.构建Dataset 1 import o 阅读全文
posted @ 2020-11-09 20:20 最咸的鱼 阅读(240) 评论(0) 推荐(0) 编辑
摘要:我可太咸鱼了,开学这么久就刷了这么点儿题。。。 94.二叉树的中序遍历 给定一个二叉树,返回它的中序遍历。 实例: 输入: [1,null,2,3] 1 \ 2 / 3 输出: [1,3,2] 递归版: 1 # Definition for a binary tree node. 2 # class 阅读全文
posted @ 2020-11-07 12:19 最咸的鱼 阅读(51) 评论(0) 推荐(0) 编辑
摘要:1.confusion_matrix 理论部分见https://www.cnblogs.com/cxq1126/p/12990784.html#_label2 1 from sklearn.metrics import confusion_matrix 2 3 #if y_true.shape=y_ 阅读全文
posted @ 2020-11-05 21:52 最咸的鱼 阅读(193) 评论(0) 推荐(0) 编辑
摘要:我自己改进的模型为model(model = ResNet(Bottleneck, [3, 4, 6, 3], **kwargs)),原模型为resnet50。 1.查看模型参数 现模型: 1 model_dict = model.state_dict() 2 for k,v in model_di 阅读全文
posted @ 2020-10-28 19:56 最咸的鱼 阅读(513) 评论(0) 推荐(0) 编辑
摘要:详细理论部分可参考https://www.cnblogs.com/wanghui-garcia/p/10862733.html BCELoss()和BCEWithLogitsLoss()的输出logits和目标labels(必须是one_hot形式)的形状相同。 CrossEntropyLoss() 阅读全文
posted @ 2020-10-17 15:37 最咸的鱼 阅读(1288) 评论(0) 推荐(1) 编辑
摘要:CRF:条件随机场,一种机器学习技术。给定一组输入随机变量条件下,另一组输出随机变量的条件概率分布模型。 以一组词性标注为例,给定输入X={我,喜欢,学习},那么输出为Y={名词,动词,名词}的概率应该为最大。输入序列X又称为观测序列,输出序列Y又称为状态序列。这个状态序列构成马尔可夫随机场,所以根 阅读全文
posted @ 2020-09-25 14:55 最咸的鱼 阅读(1374) 评论(8) 推荐(0) 编辑