爬虫day03之scrapy安装与使用

参考博客

 

技术问题不要问，业务问题可以问
是不是有一种更好的方法？

 scrapy windows安装

 

1. 安装scrapy 
　　　　　　参考博客
        https://www.cnblogs.com/wupeiqi/articles/6229292.html
        
        a. 下载twisted 
            http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted
                       

 

        
        b. 安装wheel 
            pip3 install wheel
            
        c. 安装twisted 

　　　　　　　cd 到.whl文件所处的文件夹下
            
            pip3 install Twisted‑18.7.0‑cp36‑cp36m‑win_amd64.whl
            
        d. 安装pywin32
            pip3 install pywin32
            
            
        e. 安装scrapy 
            pip3 install scrapy 

 

linux安装

 pip3 install scrapy

创建项目与使用