摘要: Scrapy是用纯Python实现一个为了爬取网站数据、提取结构性数据而编写的应用框架,用途非常广泛,它的设计模式是Template Method Pattern。这是一个爬虫框架,所以它需要请求网页模块,下载网页模块,处理网页信息模块,对所需要的信息进行存储的模块。对于一个爬虫工程师来说,需要爬取 阅读全文
posted @ 2019-12-06 22:29 cyh2czj 阅读(258) 评论(0) 推荐(0)