Windwos系统中安装Scrapy爬虫框架
Windows中安装
安装前必备环境包
pip安装库的另外姿势
使用豆瓣源安装第三方库
用-i指定--->pip3 install -i https://pypi.doubanio.com/simple/ 包名 【该种方法适用所有包安装】
两种方法建议使用国内豆瓣源,下载会快很多;
1、whell
pip3 install wheell
2、安装Twisted --->pip install Twisted 如果安装失败 --->就需要下载到本地安装 : 通过---> https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted 根据自己windows系统和python版本下载对应的包到本地;
例如 ---> 下载:Twisted‑18.4.0‑cp35‑cp35m‑win_amd64.whl 本地
windows终端(cmd)中---> pip3 install c:\Twisted‑18.4.0‑cp35‑cp35m‑win_amd64.whl 进行安装 ;
或者cmd中进入到下注文件的目录中 ---> 执行 pip3 install Twisted‑18.4.0‑cp35‑cp35m‑win_amd64.whl 进行安装 ;
虚拟环境中安装
将Twisted下载保存到windows终端的默认目录中 或者 在终端中切换目录到下载保存Twisted目录下 ----> 进入虚拟环境--->pip3 install 进行安装即可装到虚拟环境中;
例如:将Twisted‑18.4.0‑cp35‑cp35m‑win_amd64.whl 下载保存到C:\Users\Administrator目录中 ----> workon xxxoo xxxoo为自定义的虚拟环境名称 进入后执行pip3 install 安装
3、pypiwin32
pip3 install pypiwin32 或者 easy_install
pypiwin32 -->安装失败时 就需要下载到本地安装 : 通过:https://sourceforge.net/projects/pywin32/files/pywin32/ 必须根据自己windows系统和python版本下载对应的包到本地,要不然会报错
下载到本地后,将该文件放到(终端)目录中或者在cmd终端中进入该目录 -->执行:pip3 install pywin32-221.win-amd64-py3.4.exe
如果安装失败,使用:easy_install pywin32-221.win-amd64-py3.4.exe
4、scrapy
pip3 install scrapy 或者常用国内豆瓣源下载安装 : pip3 install -i https://pypi.doubanio.com/simple/ scrapy
输入scrapy 如下图安装成功