上一页 1 2 3 4 5 6 ··· 12 下一页
摘要: 进程池+requests+splash实现 阅读全文
posted @ 2019-07-29 14:52 争-渡 阅读(498) 评论(0) 推荐(0)
摘要: 1.背景[没啥用] 血的教训,就在某一天夜里,突然发现我在服务器上安装的mongo挂掉了,爬虫爬的数据没法存储, 整整跑了一周的数据啊,就这样断掉了,就在第二天回到公司重启了mongo但是没过几秒就又挂了, 一顿神找问题[本职不是运维伤不起啊],最终发现是服务器磁盘满了,what?第一次遇到,相信 阅读全文
posted @ 2019-07-24 12:06 争-渡 阅读(144) 评论(0) 推荐(0)
摘要: 计算一个库中所有collection数据量 阅读全文
posted @ 2019-07-22 09:15 争-渡 阅读(1329) 评论(0) 推荐(0)
摘要: Ubuntu修改时间 1 Ubuntu的时间分类 2 修改Ubuntu系统时间 2.1 修改时间 2.2 复制文件到/etc目录下 2.3 查看修改结果 3 修改Ubuntu硬件时间 阅读全文
posted @ 2019-07-18 10:26 争-渡 阅读(6682) 评论(0) 推荐(1)
摘要: 1、使用命令行添加密钥 PS:如果第一步没办法运行先安装wget[安装方法链接] 2、使用命令行添加Google Chrome PPA 3、安装或升级Google Chrome。使用以下命令来安装最新的Google Chrome稳定版本。 如果您已经安装了较旧的版本,它将使用最新版本来升级当前安装的 阅读全文
posted @ 2019-07-17 10:39 争-渡 阅读(895) 评论(0) 推荐(0)
摘要: 1 ubuntu安装wget 2 apt-get update 3 apt-get install wget 4 wget --version 阅读全文
posted @ 2019-07-17 10:23 争-渡 阅读(1072) 评论(0) 推荐(0)
摘要: selenium.common.exceptions.WebDriverException: Message: unknown error: unsupported protocol 问题背景:在发起js请求后报错 <GET javascript:sdsHelp('120-1840-000-ND') 阅读全文
posted @ 2019-07-15 10:41 争-渡 阅读(184) 评论(0) 推荐(0)
摘要: 1、问题背景 随便描述一下:大概就是如果你的dataframe只有一行数据,期中有一列是nan的,在这种情况下如果对nan列进行复制为None会出现将nan转换为None状态 2、Excel截图 读取显示 解决办法 阅读全文
posted @ 2019-07-03 10:33 争-渡 阅读(856) 评论(0) 推荐(0)
摘要: 使用pipenv构建虚拟环境 <!--?xml version="1.0" encoding="UTF-8"?-->1、介绍:pipenv是基于pip的python包管理工具,是pip的增强版解决了旧的pip+virtualenv+requirements.txt的工作方式的弊端 2、安装 3、检查 阅读全文
posted @ 2019-07-01 11:15 争-渡 阅读(85) 评论(0) 推荐(0)
摘要: Jinja2模板继承 完整基板 简易基板 子模块 阅读全文
posted @ 2019-07-01 11:15 争-渡 阅读(214) 评论(0) 推荐(0)
摘要: # 信息性状态码100: ('continue')101: ('switching_protocols',)102: ('processing',)103: ('checkpoint',)122: ('uri_too_long', 'request_uri_too_long')#成功状态码200: 阅读全文
posted @ 2019-07-01 11:14 争-渡 阅读(133) 评论(0) 推荐(0)
摘要: urlencode 阅读全文
posted @ 2019-06-26 21:38 争-渡 阅读(186) 评论(0) 推荐(0)
摘要: linux(Ubuntu) 定时任务使用及启动 如果想愉快的使用定时任务请按照以下步骤操作 一、配置crontab日志 二、cron 服务的启动与停止 三、判断cron是否活着 四、关于crontab命令的基础使用 五、crontab语法 六、使用crontab执行python脚本,以及注意事项 七 阅读全文
posted @ 2019-06-19 15:32 争-渡 阅读(186) 评论(0) 推荐(0)
摘要: 关于mysql数据库在没有主键情况下去除重复数据办法 约定 步骤 1、为mat新增一列自增主键 2、根据cat字段分组,找到数量大于1的,并保留id最小的行 3、去除掉第一步添加的主键id 4、定义cat为主键 阅读全文
posted @ 2019-06-06 17:33 争-渡 阅读(679) 评论(0) 推荐(0)
摘要: 来个介绍 Docker 是一个开源的应用容器引擎,基于 Go 语言 并遵从Apache2.0协议开源。 Docker 可以让开发者打包他们的应用以及依赖包到一个轻量级、可移植的容器中,然后发布到任何流行的 Linux 机器上,也可以实现虚拟化。 容器是完全使用沙箱机制,相互之间不会有任何接口(类似 阅读全文
posted @ 2019-04-18 22:58 争-渡 阅读(182) 评论(0) 推荐(0)
摘要: 1、获取前一天时间并格式化输出 2、时间戳转datetime 3、字符串转datetime对象 from datetime import datetime 阅读全文
posted @ 2019-04-17 09:36 争-渡 阅读(124) 评论(0) 推荐(0)
摘要: 库 建库==》user db 删库==》db.dropDatabase() 集合 删除集合==》db.collection.drop() 创建集合==》db.createCollection(name,options) ==>name=要创建的集合名称 options=可选参数 指定关于内存索引 检 阅读全文
posted @ 2019-04-17 09:35 争-渡 阅读(135) 评论(0) 推荐(0)
摘要: Jinja2模板之宏 app.py templations.html _macors.html 阅读全文
posted @ 2019-04-09 15:07 争-渡 阅读(152) 评论(0) 推荐(0)
摘要: Jinja2基础使用 层级关系 index.html app.py Jinja2上下文 过滤器 测试器 Environment类 阅读全文
posted @ 2019-04-03 23:05 争-渡 阅读(224) 评论(0) 推荐(0)
摘要: Web安全防范 1、SQL注入攻击 2、xss攻击 3、csrf攻击 更多攻击及相关连接 TOP25种攻击方式 https://cwe.mitre.org/top25/ 漏洞检查工具webscarab https://github.com/OWASP/OWASP-WebScarab 阅读全文
posted @ 2019-03-25 17:55 争-渡 阅读(117) 评论(0) 推荐(0)
上一页 1 2 3 4 5 6 ··· 12 下一页