Fork me on GitHub
摘要: 在Settings.py里面,提供了提取以key-value映射的配置值的的全局命名空间(namespace)。可以通过多种机制进行设置 如何获取设定的值 命令行 项目模块 如何进行访问 通过crawler 阅读全文
posted @ 2018-04-05 21:30 TaoTao~ 阅读(296) 评论(0) 推荐(0)
摘要: 首先通过csrapy shell命令创建一个scrapy项目。 scrapy startproject projectname 会生成如下文件 进入spider_405文件夹 我们自己写的爬虫项目就放在spiders文件夹里面 items.py是用来保存你爬取的数据的数据结构 在scrapy.cfg 阅读全文
posted @ 2018-04-05 12:31 TaoTao~ 阅读(242) 评论(0) 推荐(0)