摘要: 一、介绍 Scrapy 是一种快速的高级 web crawling 和 web scraping 框架,用于对网站进行爬网并从其页面提取结构化数据。它可以用于广泛的用途,从数据挖掘到监控和自动化测试。 二、架构 三、组件 Scrapy Engine 引擎负责控制数据流在系统中所有组件中流动,并在相应 阅读全文
posted @ 2021-12-10 16:44 FalsePlus 阅读(43) 评论(0) 推荐(0)