2019年7月27日

Scrapy使用(一)

摘要： 简介Scrapy是一个为了爬取网站数据，提取结构性数据而编写的应用框架，可以应用在数据挖掘,信息处理或存储历史数据等一系列的程序中，Scrapy用途广泛可以用于数据挖掘检测和自动化测试，Scrapy使用Twisted异步网络库来处理网络通信。 流程图 调度器把request对象交给引擎，引擎负责把r 阅读全文

posted @ 2019-07-27 23:11 李小峰。 阅读(141) 评论(0) 推荐(0)

导航