摘要： 1. scrapy项目的结构 项目名字 项目名字 spiders文件夹 （存储的是爬虫文件） init 自定义的爬虫文件 核心功能文件 **************** init items 定义数据结构的地方 爬取的数据都包含哪些 middleware 中间件 代理 pipelines 管道 用来 阅读全文

摘要： 简要： scrapy的安装 # 1）pip install scrapy -i https://pypi.douban.com/simple（国内源） 一步到位 # 2) 报错1： building 'twisted.test.raiser' extension # error: Microsoft 阅读全文