scrapy学习

 

一、命令：

　　1、创建项目：

　　　　scrapy startproject projectname

　　2、创建一个爬虫：scrapy genspider spidername

　　　　

 

二、创建item：是保存爬取数据的容器，使用方法和字典类似。

　　

 　　1、

 

 三、解析response：

　　1、css选择器：

　　　　与css的用法相同。

 

　　2、xpath选择器：

　　　　

 

 　　　　

 四、item pipelines：

　　主要是用来进行

 

五、Downloader middleware用法：

　　1、

 

 

六、spider middleware：

　　1、