随笔分类 -  Scrapy爬虫之路

摘要：Scrapy简述 Scrapy是一个爬虫应用框架，所谓爬虫，即是用来爬取web网页并从中提取结构化数据，这些爬来的数据可以被应用在广泛的有用的应用中，像数据挖掘，信息处理和历史存档等。 尽管Scrapy起初被设计用于web scraping，但是它也能被用于使用APIs提取数据（例如Amazon A 阅读全文