摘要: 1、id 获取id 的属性值 2、starts-with 顾名思义,匹配一个属性开始位置的关键字 -- 模糊定位 3、contains 匹配一个属性值中包含的字符串 -- 模糊定位 4、text() 函数文本定位 5、last() 函数位置定位 阅读全文
posted @ 2019-05-19 11:55 IT_Allen 阅读(901) 评论(0) 推荐(0)
摘要: scrapy-爬取斗图代码 <一> 开局三连杀 1.创建run的文件 2.setings中配置scrapy中ROBOTSTXT_OBEY = True 解释:==观察代码可以发现,默认为True,就是要遵守robots.txt 的规则,那么 robots.txt 是个什么东西呢? 通俗来说, rob 阅读全文
posted @ 2019-05-19 11:10 IT_Allen 阅读(165) 评论(0) 推荐(0)
摘要: 05:40 起床+跑操 清晨5点40,淡青色的天空还镶着几颗稀落的残星 06:00 晨读 晨读大约有半小时的时间,老师们会把这半个小时安排的非常充实,“晨读是有任务的,当天的科目老师(一般是英语和语文)会提前在黑板上写下晨读的任务 06:35 早餐+早自习 晨读在6点35左右结束,接下来是早饭时间, 阅读全文
posted @ 2019-05-19 10:37 IT_Allen 阅读(199) 评论(0) 推荐(0)
摘要: 加代理ip 隧道代理 setting中 解开 下载器 打开 蘑菇代理 复制key 按照下载器的路径 添加代理ip [添加至函数外] 在类外边添加key 和手动添加 http:// 在蘑菇代理中 复制方法 括号 中内容 然后试着请求 ip地址 更换ip地址 [setting中 delay 设置延迟 3 阅读全文
posted @ 2019-05-19 10:33 IT_Allen 阅读(669) 评论(0) 推荐(0)