摘要: scrapy异步的爬虫框架 异步的爬虫框架 高性能的数据解析,持久化存储,全栈数据的爬取,中间件,分布式 框架:就是一个集成好了各种功能且具有很强通用性的一个项目模板。 环境安装: Linux: Windows: 基本使用 新建一个工程: 前提需要将 这个文件放在项目目录下 settings.py: 阅读全文
posted @ 2019-12-08 19:10 adrian-boy 阅读(1060) 评论(0) 推荐(0)