致林

摘要： 在公司沟通的时候，一般会涉及到请求协助、汇报等场景， 请求协助： 三要素：背景、后果、需要什么支持 举例： 背景：目前需要新上线一个功能，因为人力评估不够，可能延期 后果：该功能延期会导致项目整体进度受影响 需要什么支持：需要新增2个人力协助 汇报： STAR法则：情境(situation)、任务（ 阅读全文

摘要： 远程命令注入： 在lib中插入特定代码，调用lib时会执行代码，主要用于cs系统，例如绕过激活功能 路径遍历： 利用web服务文件交换功能，直接获取文件 例如：http://www.xxx.com/getfile=image.jgp 防御：过滤特殊字符(../)、目录权限控制 sql注入： 例如输入 阅读全文

摘要： 完全二叉树：除了最后一层，其他层节点都是满的 满二叉树：每层节点都是满的 平衡二叉树： 左右子树高度差不超过1，插入、删除时间复杂度O(logn) 二叉查找树： 左节点小于根节点，根节点小于右节点 最大最小堆： 最大堆：父节点比子节点大，插入删除O(logn) 最小堆：父节点比子节点小，插入删除O( 阅读全文

摘要： 1. 使用ps查看相关进程 ps -elf | grep python 2. 使用awk提取进程pid ps -elf | grep python|awk '{print $4}' 这里不一定是$4，根据实际情况调整 3. 使用xargs传参并执行kill ps -elf | grep python 阅读全文

摘要： 问题 训练模型时，训练到第2个epoch时程序无缘无故消失，没有打印任何异常日志 定位方法 程序加try catch，捕获异常日志，运行python时使用如下命令记录error信息 nohup python xxx.py > nohup.out 2>&1 & 结果：nohup没有记录任何信息，训练过 阅读全文

摘要： github: https://github.com/haibincoder/NlpSummary/tree/master/torchcode/classification 使用TextCNN实现文本分类 使用LSTM实现文本分类 使用Transformers实现文本分类 import copy f 阅读全文

摘要： github: https://github.com/haibincoder/NlpSummary/tree/master/torchcode/classification 使用TextCNN实现文本分类 使用LSTM实现文本分类 使用Transformers实现文本分类 import torch 阅读全文

摘要： github: https://github.com/haibincoder/NlpSummary/tree/master/torchcode/classification 使用TextCNN实现文本分类 使用LSTM实现文本分类 使用Transformers实现文本分类 # model # cod 阅读全文

摘要： 问题 在清华新闻分类数据集上，使用TextCNN效果不错，使用TextLSTM/RNN学习不动，损失和acc均无变化 定位问题 CNN效果有提升，说明train代码和数据没问题； 更改RNN/LSTM结构，加损失函数还是没效果； 修改lr、embed_dim，num_laber均无效果； 本地一步步 阅读全文

摘要： 信息熵 信息熵也被称为熵，用来表示所有信息量的期望。 公式如下： 例如在一个三分类问题中，猫狗马的概率如下： |label|猫|狗|马| |:--|:--|:--|:--| |predict|0.7|0.2|0.1| |信息量|-log(0.7)|-log(0.2)|-log(0.1)| 信息熵为： 阅读全文

摘要： 背景 多线程情况下，子线程的sl4j打印日志缺少traceId等信息，导致定位问题不方便 解决方案 打印日志时添加用户ID、trackId等信息，缺点是每个日志都要手动添加 使用mdc直接拷贝父线程值 实现 // 新建线程时： Map<String, String> mdcContextMap = 阅读全文

摘要： 预训练&搜索 背景 传统的Term字面匹配无法处理语义相关性，例如“英语辅导”、“新东方” 发展 2013 word2vec 优点：通过无监督学习获得词向量 缺点：无法处理多义词，上下文无关 2018 ELMo 结构：双层双向RNN 优点：上下文相关，动态生成词向量 2017 transformer 阅读全文

摘要： 背景 使用pytorch加载huggingface下载的albert-base-chinede模型出错 Exception has occurred: OSError Unable to load weights from pytorch checkpoint file. If you tried 阅读全文

摘要： 背景：云物理机没安装tf相关环境，需要使用docker直接跑模型 在docker hub下载一个tensorflow gpu镜像 运行docker，直接进入bash，使用nvidia-smi正常看到现存，然后正常跑代码即可 docker run -v /data/bert:/app --runtim 阅读全文

摘要： 启动arthas，执行以下命令会提示所有java进程，选择进程id wget https://arthas.aliyun.com/arthas-boot.jar java -jar arthas-boot.jar 使用dashboard或thread列出所有线程 dashboard thread 找 阅读全文

摘要： # 获取当前设备 device = torch.device("cuda" if torch.cuda.is_available() else "cpu") 阅读全文

摘要： 参考： Deep Joint Entity Disambiguation with Local Neural Attention. (Ganea and Hofmann, 2017, EMNLP) DeepType: multilingual entity linking by neural typ 阅读全文

摘要： import pandas as pd def apply_func_demo(x: int) -> int: return x*10 def apply_func_concat(x: pd.DataFrame) -> str: if x['age'] % 2 == 0: return '男' el 阅读全文

摘要： 整理了一下目前想看的一些视频： 未看： 哈尔滨工业大学-深度学习基础（MOOC） 面向程序员的深度学习实战课程(2019)(PyTorch/fastai) 阅读全文

摘要： postmant请求 { "signature_name":"get_result", "inputs":{ "dropout_keep_prob": 1.0, "q1": [[3, 12, 30, 20], [3, 12, 30, 20]], "q1_len": [4, 4], "q2": [[3 阅读全文