python3.7安装Scrapy

Python3.7安装scrapy

按照笔者看的一本书的教材,分为以下三步骤:

1.pip install twisted.

2.pip install lxml

3.pip install scrapy

虽然就是这简短的3个步骤,但是却有许多坑一般。

本人刚开始是安装的python3.9,无论如何也安不上,找了许多教程,最终重新安装了python3.7.5才算搞定。特别要注意的就是重装python3.7.5一定要重新配置环境变量。

即要改变python的环境变量,也要改变python下scripts文件夹的环境变量。

 需要注意的就是环境变量里面的path是由上而下生效,所以修改后的路径最好是放在前面。

环境变量配置好以后直接pip install twisted就一帆风顺了。

 

 

pip install lxml也是没有什么问题

到了最后pip install scrapy又出现了问题:这么长一大堆,有点懵,但是看见这个warning,决定先解决掉。于是直接根据提示更新了pip。更新完成再次重新安装scrapy,终于搞定了。

 

 

 

 

 

 

 

 

twisted下载网站,不太建议使用这个:https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted
posted @ 2021-01-23 12:23  念秋  阅读(301)  评论(0编辑  收藏  举报