lshan - 博客园

2021年8月23日

摘要：原文：https://www.cnblogs.com/imcati/p/11743922.html 背景：防止第三方引用链接访问我们的图片，消耗服务器资源和网络流量，我们可以在服务器上做防盗链限制。实现防盗链的方式有两种：refer方式和签名方式。 refer方式实现防盗链工作模块：ngx_ht 阅读全文

posted @ 2021-08-23 16:21 lshan 阅读(348) 评论(0) 推荐(0)

2021年8月22日

docker sftp+ngnix 搭建临时文件，图片服务器

该文被密码保护。阅读全文

posted @ 2021-08-22 17:29 lshan 阅读(3) 评论(0) 推荐(0)

2021年8月20日

docker sftp

摘要：直接参考：https://hub.docker.com/r/atmoz/sftp Usage Define users in (1) command arguments, (2) SFTP_USERS environment variable or (3) in file mounted as /e 阅读全文

posted @ 2021-08-20 19:13 lshan 阅读(173) 评论(0) 推荐(0)

docker 　nginx　部署

摘要：官网：https://hub.docker.com/_/nginx 前端UI发布：将前端打包后的编译文件dict 挂载到　/usr/share/nginx/html/ docker run -it -d --restart unless-stopped -p 8080:80 --name bx_n 阅读全文

posted @ 2021-08-20 18:26 lshan 阅读(84) 评论(0) 推荐(0)

使用jieba进行数据预处理（分词，过滤停用词及标点，获取词频、关键词等（转）

摘要：原文：https://blog.csdn.net/lk7688535/article/details/77971376 整理停用词去空行和两边的空格 stop_words_list = [line.strip() for line in open('stop_key.txt', encoding= 阅读全文

posted @ 2021-08-20 12:31 lshan 阅读(1736) 评论(0) 推荐(0)

python 中文分词器　jieba TF-IDF 算法的关键词　　TextRank 算法的关键词

摘要： jieba分词github介绍文档：https://github.com/fxsjy/jieba github介绍文档: jieba “结巴”中文分词：做最好的 Python 中文分词组件 "Jieba" (Chinese for "to stutter") Chinese text segment 阅读全文

posted @ 2021-08-20 10:14 lshan 阅读(2013) 评论(0) 推荐(1)

2021年8月12日

docker python crontab 定时任务

摘要：背景：有10以下定时任务，他们互不关联，需要放在server 上docker里面 run, 目前任务少，还未安装airflow , 临时方案要将 crontab -e 命令的编辑器修改为 vim，你可以通过设置环境变量来实现。 1.临时： export EDITOR=vim 2.当前用户： ech 阅读全文

posted @ 2021-08-12 11:30 lshan 阅读(1091) 评论(0) 推荐(0)

2021年8月11日

pymongo cursor 非空判断 , 查询结果数量

摘要：今天处理游标非空判断，一直报错：问题：　DeprecationWarning: count is deprecated. Use Collection.count_documents instead 1.如果仅仅只需要数量：当我使用pymongo查询出对应的cursor（find出的docume 阅读全文

posted @ 2021-08-11 18:47 lshan 阅读(2751) 评论(0) 推荐(0)

python 直接使系统环境变量

摘要：说明，在python代码中直接使用环境变量，并且给予默认值，尤其在docker 发布时，可以通过环境变量修改参数　：-e JAVA_HOME=xxxx 直接使用： value = os.getenv("evn_name", "default") import os def os_environ(e 阅读全文

posted @ 2021-08-11 09:54 lshan 阅读(141) 评论(0) 推荐(0)

2021年8月3日

python 监听文件夹下的文件，将文本内容写入kafka,支持断电续传　（docker 发布）看门狗(watchdog)

摘要： python 监听文件夹下的文件，将文本内容写入kafka,支持断电续传　（docker 发布）１．代码２．docker 部署１．代码： pip install watchdog python 监听文件夹下的文件，将文本内容写入kafka,支持断电续传　（docker 发布）１．代码： #! 阅读全文

posted @ 2021-08-03 11:44 lshan 阅读(438) 评论(0) 推荐(0)