摘要: 一、简介 Scrapy是一个基于Twisted 的异步处理框架,是针对爬虫过程中的网站数据爬取、结构性数据提取而编写的应用框架。 可以应用在包括数据挖掘,信息处理或存储历史数据等一系列的程序中。 1.1 安装 1.2 框架介绍 组成: · Engine 引擎,处理整个系统的数据流处理、触发事务 · 阅读全文
posted @ 2018-09-29 22:50 eo_will 阅读(290) 评论(0) 推荐(0)