摘要: 模块名职责是否需要实现 Scrapy Engine(引擎) 总指挥: 负债数据和信号在不同的模块之间传递 scrapy 已经实现 Scheduler(调度器) 一个队列,存放引擎发过来的request请求 scrapy 已经实现 Downloader(下载器) 下载引擎发送过来的request请求, 阅读全文
posted @ 2021-04-18 17:16 远哥说 阅读(88) 评论(0) 推荐(0)
摘要: 1. 创建配置文件 BasicLog.py import logging​# 设置logging 格式logging.basicConfig(level=logging.DEBUG, # 打印日志等级 format='%(filename)s %(levelname)s ' '[%(lineno)d 阅读全文
posted @ 2021-04-18 16:19 远哥说 阅读(1675) 评论(0) 推荐(0)