摘要：Scrapy教程 原文地址 此教程我们假设你已经装好了Scrapy，如果没有请查看 "安装指南" .。 我们将要抓取 "quotes.toscrape.com" 网站，这个网站展示了很多名人名言。 此教程指导你完成一下任务： 1. 新建一个Scrapy工程 2. 编写一个spider爬网站提取数据 阅读全文

摘要：Scrapy一览 原文地址 Scrapy是一个应用程序框架，为各种各样的应用程序爬取网站提取结构化数据，如数据挖掘，信息处理或者历史档案。 Scrapy不止可以做网站的数据提取，也可以用于APIs（如 Amazon Associates Web Services）的数据提取或者作为专用的web蜘蛛。 阅读全文

摘要：原文地址 安装Scrapy Scrapy运行在python2.7和python3.3或以上版本（Windows还不支持python3）。 如果你已经熟悉python包的安装，你可以安装Scrapy使用它的PyPI依赖： 我们强烈建议你把Scrapy安装在一个 "专用的虚拟环境中" ，以避免和你的系统 阅读全文