Fork me on GitHub
摘要: 新建的空Scrapy项目: scrapy 是一个为了爬取网站数据,提取结构性数据而编写的应用框架,我们只需要实现少量代码,就能够快速的抓取到数据内容。Scrapy 使用了 Twisted['twɪstɪd](其主要对手是Tornado)异步网络框架来处理网络通讯,可以加快我们的下载速度,不用自己去实 阅读全文
posted @ 2018-01-11 16:37 RongT 阅读(513) 评论(0) 推荐(4)
摘要: # 创建项目 scrapy startproject 工程名 # 创建爬虫 scrapy genspider example example.com 阅读全文
posted @ 2018-01-11 10:44 RongT 阅读(156) 评论(0) 推荐(3)