摘要: Scrapy是一个为了爬取网站数据,提取结构性数据而编写的应用框架。 可以应用在包括数据挖掘,信息处理或存储历史数据等一系列的程序中。 阅读全文
posted @ 2016-12-02 15:22 爬虫手 阅读(224) 评论(0) 推荐(0) 编辑
摘要: 前提:先创建一个文件夹用来存放爬虫工程 创建项目命令: 例子: 创建成功如下图: 文件夹目录如下 阅读全文
posted @ 2016-12-02 15:11 爬虫手 阅读(1199) 评论(0) 推荐(0) 编辑
摘要: 适用于python 2.7 64位安装 一、操作系统:WIN7 64位 二、python版本:2.7 64位(scrapy目前不支持3.x) 不确定位数的,看图 三、安装相关软件:(可以从我的百度网盘下载:链接:http://pan.baidu.com/s/1pL4fQ5t 密码:yg4f) 我配置 阅读全文
posted @ 2016-12-01 15:34 爬虫手 阅读(3304) 评论(0) 推荐(0) 编辑