摘要: 远程连接Redis配置流程 配置流程 xxxxxxxxxx 10 1 【1】修改配置文件 2 sudo gedit /etc/redis/redis.conf 3 修改如下2个内容后保存退出: 4 # bind 127.0.0.1 ::1 把此行注释掉 5 protected-mode no 把默认 阅读全文
posted @ 2020-09-14 17:25 爱吃萝卜爱吃兔 阅读(897) 评论(0) 推荐(0) 编辑
摘要: 回顾 scrapy框架 五大组件+工作流程+常用命令 x 1 【1】五大组件 2 1.1) 引擎(Engine) 3 1.2) 爬虫程序(Spider) 4 1.3) 调度器(Scheduler) 5 1.4) 下载器(Downloader) 6 1.5) 管道文件(Pipeline) 7 1.6) 阅读全文
posted @ 2020-09-14 17:24 爱吃萝卜爱吃兔 阅读(139) 评论(0) 推荐(0) 编辑
摘要: scrapy框架 Scrapy框架五大组件 xxxxxxxxxx 12 1 【1】引擎(Engine) 整个框架核心 2 【2】爬虫程序(Spider) 数据解析提取 3 【3】调度器(Scheduler) 维护请求队列 4 【4】下载器(Downloader) 获取响应对象 5 【5】管道文件(P 阅读全文
posted @ 2020-09-14 17:22 爱吃萝卜爱吃兔 阅读(142) 评论(0) 推荐(0) 编辑
摘要: 导出 在项目中执行 pip freeze > requirements.txt absl-py==0.8.1 amqp==2.5.1 apturl==0.5.2 asn1crypto==0.24.0 astor==0.8.0 attrs==19.3.0 Automat==0.8.0 beautifu 阅读全文
posted @ 2020-09-14 17:15 爱吃萝卜爱吃兔 阅读(337) 评论(0) 推荐(0) 编辑