Python语言学习 （九）1.1

创建项目：

scrapy startproject scrapydemo

 

创建spider：

scrapy genspider spidername 'starturl'

 

查看有哪些爬虫：

scrapy list

 

运行爬虫：

scrapy crawl DoubanDemo

 

爬虫脚本负责解析，提取感兴趣的内容，然后把内容丢给pipeline，由pipeline负责保存，做持久化，是他们数据沟通的渠道，items里定义数据格式，settings里做配置。