摘要: 最近学习爬虫时遇到的报错 具体报错代码如下 将其修改为 报错原因:没有找到具体item,所以load出错,item后面要加() 阅读全文
posted @ 2018-09-16 19:06 霂雨 阅读(3784) 评论(0) 推荐(0)
摘要: 1.使用两个类,priority都从1开始加 第一个类 第二个类 testng配置 运行结果 从中可以看出如果两个类的priority 都从1开始递增,则在执行的之后,即使指定了类的加载先后顺序,但是不会按照预想的一个类按顺序加载完成再执行另一个类。 主要原因:priority是在testng开始时 阅读全文
posted @ 2018-09-12 14:53 霂雨 阅读(1489) 评论(0) 推荐(0)
摘要: 1.新建项目名称 2.环境添加scrapy 3.打开cmd命令, 进入将要把代码放入的目录 输入 最终,项目目录结构 4.执行某一个spider 5,设置 ROBOTSTXT_OBEY = False 6.调试命令 7.新增一个spider 阅读全文
posted @ 2018-09-09 22:22 霂雨 阅读(235) 评论(0) 推荐(0)
摘要: 1.压缩文件 2.压缩文件夹 具体函数介绍 ZipFile(filename[,mode[,compression[,allowZip64]]]) filename:文件对象;例如:’xxx.zip’ mode:可选r,w,a代表不同的打开文件的方式;r只读;w重写;a添加; compression 阅读全文
posted @ 2018-08-28 10:52 霂雨 阅读(3964) 评论(0) 推荐(0)
摘要: 解决方法 使用update-ca-trust 更新CA证书库 以下转自 https://www.jb51.net/LINUXjishu/287588.html (如有侵权,联系即删) 每一种客户端在处理https的连接时都会使用不同的证书库。IE浏览器和FireFox浏览器都可以在本浏览器的控制面板 阅读全文
posted @ 2018-08-21 16:36 霂雨 阅读(12020) 评论(0) 推荐(0)
摘要: 1.centos上安装 1.从官网下载安装包,然后上传到linux上(https://www.anaconda.com/download/#linux) 2.进入安装包目录, 输入 bash Anaconda3-5.2.0-Linux-x86_64.sh 3.接下来一路点击yes 4.最后一步提示安 阅读全文
posted @ 2018-08-17 15:05 霂雨 阅读(173) 评论(0) 推荐(0)
摘要: 之前在手机上使用 “ip:端口号” 的方法就能直接在手机上自动下载安装fiddler证书,但是现在有些手机并不能,那就需要我们去手机设置里手动安装。前提是,都要使用 “ip:端口号” 的方法先去下载好证书。 IOS:设置 —> 通用 —> 关于本机 —> 受信任证书存储区,找到需要安装的证书,安装即 阅读全文
posted @ 2018-08-10 09:53 霂雨 阅读(17219) 评论(0) 推荐(0)
摘要: 关于PEP 8,Style Guide for Python Code,是Python官方推出的Python编码风格的约定,虽然这不是硬性的规定,但是如果Python程序员都尽量遵循这个文档,那么编码风格的统一会让代码的可读性大大提升。 在Pycharm里边默认也是有进行PEP8的检测,强迫症的人表 阅读全文
posted @ 2018-08-09 20:32 霂雨 阅读(1305) 评论(0) 推荐(0)
摘要: 1、 先排序再子查询 SELECT * FROM (SELECT * FROm player_level_up_log ORDER BY date DESC) AS t GROUP BY t.pid; 2、 需要进行筛选查询 先排序然后子查询代码 SELECT pid,pname,MAX(currL 阅读全文
posted @ 2018-07-31 09:50 霂雨 阅读(533) 评论(0) 推荐(0)
摘要: 参考 https://blog.csdn.net/CSDN2497242041/article/details/79256063 阅读全文
posted @ 2018-07-04 16:39 霂雨 阅读(369) 评论(0) 推荐(0)