文章分类 - Scrapy分布式爬虫

Scrapy分布式爬虫

2.scrapy数据保存格式

摘要：一、保存数据格式为json 阅读全文

posted @ 2019-07-07 21:54 wei_hu 阅读(253) 评论(0) 推荐(0)

1.scrapy入门

摘要：一、新建项目 cd 到spiders目录下创建爬虫文件项目目录结构: 二、运行项目三、不遵守robots协议阅读全文

posted @ 2019-06-30 20:29 wei_hu 阅读(77) 评论(0) 推荐(0)