摘要: Redis 定义:Redis是一个软件,帮助开发者对一台机器的内存进行操作 安装redis软件方法: 超链接地址:https://www.cnblogs.com/L5251/articles/9146881.html Python中下载依赖包 测试Redis是否安装成功 # 1、引入redis # 阅读全文
posted @ 2018-07-05 20:03 争-渡 阅读(376) 评论(0) 推荐(0)
摘要: 框架Scrapy中的选择器 阅读全文
posted @ 2018-07-05 19:50 争-渡 阅读(80) 评论(0) 推荐(0)
摘要: 框架Scrapy中的下载中间件 获取用户设定代理位置源码链接 request.py获取用户设置代理块逻辑 httpproxy.py[代理主逻辑源码] Scrapy内置代理设置方法: 代理要在爬虫开始运行时就设置好故设置在start_requests中 scrapy中设置代理 内置方法 在爬虫启动时, 阅读全文
posted @ 2018-07-05 10:25 争-渡 阅读(211) 评论(0) 推荐(0)